Benchmark

Um teste às cegas de assistentes de IA para a advocacia: 120 perguntas do dia a dia jurídico, em 14 categorias de pesquisa, feitas a 7 configurações de 5 produtos. Todas as respostas estão abertas para conferência.

As notas vêm de três modelos de empresas diferentes, Claude Opus 5.5, GPT‑6 Astra e Muse Spark 1.3, que avaliaram cada resposta sem saber de qual produto era. Vale a nota do meio entre os três, e as citações foram conferidas nas bases oficiais.

perguntas: 120; perguntas
categorias de pesquisa: 14; categorias de pesquisa
juízes às cegas: 3; juízes às cegas
respostas avaliadas: 840; respostas avaliadas
citações conferidas: 4.435; citações conferidas
snapshot: 28/09/26; snapshot

Nota geral

Nota média nas 14 categorias, de 0 a 100.

Placar geral, em ordem de nota
#	Configuração	Nota	Cobertura	Citação errada	Admite limites	Por categoria
1	Fidelia Aprofundado web	83 ±3	14 de 14	nenhuma	84%	Jurisprudência: 87 Legislação: 90 Consulta Processual: 57 Doutrina: 81 Atos do CNJ: 90 Portais Oficiais: 95 Conferência de Citação: 83 Jurimetria: 65 Normas Regulatórias: 86 Publicações e Intimações: 87 Índices Oficiais: 95 Consulta Empresarial: 84 Contratações Públicas: 82 Marcas e Patentes: 84
1	Fidelia Rápido web	82 ±3	14 de 14	nenhuma	97%	Jurisprudência: 83 Legislação: 85 Consulta Processual: 63 Doutrina: 79 Atos do CNJ: 86 Portais Oficiais: 86 Conferência de Citação: 86 Jurimetria: 73 Normas Regulatórias: 85 Publicações e Intimações: 85 Índices Oficiais: 93 Consulta Empresarial: 82 Contratações Públicas: 79 Marcas e Patentes: 80
3	Fidelia MCP conector + Claude Sonnet 5	71 ±3	14 de 14	nenhuma	84%	Jurisprudência: 68 Legislação: 69 Consulta Processual: 61 Doutrina: 75 Atos do CNJ: 71 Portais Oficiais: 79 Conferência de Citação: 71 Jurimetria: 59 Normas Regulatórias: 65 Publicações e Intimações: 61 Índices Oficiais: 90 Consulta Empresarial: 82 Contratações Públicas: 83 Marcas e Patentes: 65
4	JusRatio MCP conector + Claude Sonnet 5	51 ±4	8 de 14	1 em cada 34	66%	Jurisprudência: 79 Legislação: 70 Consulta Processual: 38, não oferece Doutrina: 65 Atos do CNJ: 43 Portais Oficiais: 59 Conferência de Citação: 80 Jurimetria: 29, não oferece Normas Regulatórias: 65 Publicações e Intimações: 31, não oferece Índices Oficiais: 58 Consulta Empresarial: 34, não oferece Contratações Públicas: 33, não oferece Marcas e Patentes: 34, não oferece
4	MinutaIA web	51 ±3	10 de 14	nenhuma	63%	Jurisprudência: 64 Legislação: 87 Consulta Processual: 39, não oferece Doutrina: 48 Atos do CNJ: 69 Portais Oficiais: 43 Conferência de Citação: 79 Jurimetria: 28 Normas Regulatórias: 69 Publicações e Intimações: 41, não oferece Índices Oficiais: 63 Consulta Empresarial: 27, não oferece Contratações Públicas: 24, não oferece Marcas e Patentes: 30
4	Jusfy web	47 ±4	13 de 14	nenhuma	44%	Jurisprudência: 56 Legislação: 44 Consulta Processual: 36 Doutrina: 53 Atos do CNJ: 52 Portais Oficiais: 53 Conferência de Citação: 71 Jurimetria: 30 Normas Regulatórias: 56 Publicações e Intimações: 40, não oferece Índices Oficiais: 69 Consulta Empresarial: 43 Contratações Públicas: 32 Marcas e Patentes: 28
7	Jus IA web	43 ±3	11 de 14	nenhuma	72%	Jurisprudência: 58 Legislação: 65 Consulta Processual: 36, não oferece Doutrina: 56 Atos do CNJ: 41 Portais Oficiais: 38 Conferência de Citação: 65 Jurimetria: 29 Normas Regulatórias: 49 Publicações e Intimações: 37 Índices Oficiais: 31, não oferece Consulta Empresarial: 39, não oferece Contratações Públicas: 31 Marcas e Patentes: 28

Por tipo de pergunta

O que explica a nota: fazer o que foi pedido, acertar o dado exato, admitir quando não sabe e combinar fontes diferentes.

Nota de cada configuração por tipo de pergunta
Configuração	Faz o que foi pedido	Acerta o dado exato	Admite limites nas armadilhas	Cruza diferentes fontes
Fidelia Aprof.Fidelia Aprofundado	82	88	80	87
Fidelia RápidoFidelia Rápido	78	85	81	77
Fidelia MCPFidelia MCP	68	74	69	64
JusRatio MCPJusRatio MCP	53	62	60	77
MinutaIAMinutaIA	51	64	59	58
JusfyJusfy	47	46	54	56
Jus IAJus IA	41	49	57	57

Por categoria

Clique numa categoria para ver o placar dela e as perguntas.

Nota de cada configuração por categoria
Configuração	Jurisp.	Legislação	Consulta Processual	Doutrina	Atos CNJ	Portais	Conf. Citação	Jurimetria	Normas Regulatórias	Publicações	Índices	Consulta Empresarial	Contratações Públicas	Marcas e Patentes
Fidelia Aprof.Fidelia Aprofundado	87	90	57	81	90	95	83	65	86	87	95	84	82	84
Fidelia RápidoFidelia Rápido	83	85	63	79	86	86	86	73	85	85	93	82	79	80
Fidelia MCPFidelia MCP	68	69	61	75	71	79	71	59	65	61	90	82	83	65
JusRatio MCPJusRatio MCP	79	70	38	65	43	59	80	29	65	31	58	34	33	34
MinutaIAMinutaIA	64	87	39	48	69	43	79	28	69	41	63	27	24	30
JusfyJusfy	56	44	36	53	52	53	71	30	56	40	69	43	32	28
Jus IAJus IA	58	65	36	56	41	38	65	29	49	37	31	39	31	28