86/ 100
Score de qualidade
86/ 100+0.04
Média ponderada — 40% fidelidade · 30% citação · 30% alucinação.
Modo demo — dados sintéticos de uma agência fictícia, pra você ver o painel sem plugar nada. voltar pro real.
As 3 perguntas que importam — quanto custa, está melhorando, e gera valor · 5 chatbots · 30 dias
Score de qualidade
Média ponderada — 40% fidelidade · 30% citação · 30% alucinação.
Conversas avaliadas
14.852
Chatbots ativos
5
Custo estimado
$15.37
Traces
Faithfulness
Citation accuracy
Hallucination
Qualidade, erros e operação — pra quando você precisa investigar.
Coverage
93.6%
score ponderado · 0.5 faith + 0.3 cit + 0.2 hallu
estimativa · 1 chamada/trace
| modelo | traces | faith | cit | hallu | custo est. |
|---|---|---|---|---|---|
| gpt-4o-mini | 11.203 | faith.0.86 | citat.0.78 | hallu.0.90 | $4.41 |
| gpt-4o | 2.104 | faith.0.91 | citat.0.85 | hallu.0.94 | $16.83 |
| claude-3-5-sonnet-20241022 | 982 | faith.0.93 | citat.0.87 | hallu.0.95 | $8.94 |
| gemini-1.5-pro | 423 | faith.0.84 | citat.0.79 | hallu.0.88 | $1.13 |
| gpt-4o-mini-2024-07-18 | 140 | faith.0.83 | citat.0.76 | hallu.0.89 | $0.06 |
faithfulnesscitation_accuracyhallucinationLEICNPJ_CPF_RGENTIDADE_BRPRAZO_VALORPOLITICAGEOGRAFIA_BRGENERICALei nº inventada
LEI · maioria em atendimento-cdc (17)
Prazo / valor errado
PRAZO_VALOR · maioria em whatsapp-ouvidoria (11)
CNPJ/CPF/RG fabricado
CNPJ_CPF_RG · maioria em atendimento-cdc (7)
Receita / INSS / BACEN inventado
ENTIDADE_BR · maioria em legal-rag-trabalhista (4)
Outras
GENERICA · maioria em customer-support-en (3)
investigue antes do cliente reclamar
atendimento-cdcQual o prazo do CDC pra arrependimento de compra online?
Ver detalheswhatsapp-ouvidoriaPosso pedir restituição do INSS de 2018?
Ver detalheslegal-rag-trabalhistaQual a multa de trânsito por avançar farol vermelho em SP?
Ver detalhesatendimento-cdcCNPJ da Receita Federal pra emissão de DARF?
Ver detalhesinterno-rh-botLei nº 14.300 fala sobre o quê?
Ver detalhesshowcase pra próxima call
atendimento-cdcO que diz o art. 49 do CDC sobre direito de arrependimento?
Ver detalheswhatsapp-ouvidoriaComo calcular aviso prévio proporcional pela CLT?
Ver detalheslegal-rag-trabalhistaQuantos dias de férias por ano um CLT acumula?
Ver detalhesatendimento-cdcQual o valor do salário mínimo em 2026?
Ver detalhesinterno-rh-botComo funciona a aposentadoria por idade no INSS?
Ver detalhesQual o prazo do CDC pra arrependimento de compra online?
Posso pedir restituição do INSS de 2018?
Qual a multa de trânsito por avançar farol vermelho em SP?
CNPJ da Receita Federal pra emissão de DARF?
Lei nº 14.300 fala sobre o quê?
Quantos dias de licença-paternidade na CLT?
Como calcular ITBI em São Paulo capital?
Quem é o ouvidor-geral atual da Receita Federal?
É legal cobrar juros acima de 12% ao ano no Brasil?
Qual o piso salarial dos professores em 2026?
passos por agent run · curtas → longas
| tool | total | erros | error rate |
|---|---|---|---|
| search_legal_db | 142 | 23 | 16.2% |
| calculator | 89 | 1 | 1.1% |
| fetch_inss_url | 67 | 18 | 26.9% |
| lookup_cnpj | 54 | 4 | 7.4% |
| send_whatsapp | 48 | 2 | 4.2% |
| search_jurisprudence | 31 | 9 | 29.0% |
| vector_retrieval | 28 | 0 | 0.0% |
cost_per_task = soma de tokens × pricing por modelo
legal-rag-trabalhista$0.62Analisar caso trabalhista de horas extras não pagas e propor…
atendimento-cdc$0.48Listar 5 jurisprudências recentes sobre direito de arrependi…
whatsapp-ouvidoria$0.32Investigar reclamação no WhatsApp sobre cobrança indevida e …
interno-rh-bot$0.18Calcular cota de férias proporcional pra funcionário CLT com…
customer-support-en$0.12Translate Brazilian commercial contract clauses to English w…