Ferramenta jurídica paga alucina menos que o ChatGPT?
Alucina menos, e não chega a zero. Nenhuma ferramenta, paga ou gratuita, elimina a invenção de jurisprudência, porque todas calculam a resposta mais provável. O que muda entre elas é quanto erram e se te dão o link para conferir. A decisão de assinar começa pelo seu gargalo e pela conferência, não pela promessa de erro zero.
Neste artigo (6 seções)
A pergunta errada
Toda vez que aparece um advogado sancionado por jurisprudência inventada, como no caso da multa de que já falei, a mesma pergunta chega no meu WhatsApp: “Daniel, qual ferramenta jurídica eu assino para isso não acontecer comigo?”. E a resposta honesta é que essa é a pergunta errada, porque nenhuma delas te dá imunidade. Absolutamente nenhuma. Nem a mais cara, nem a mais nova, nem a que eu mais gosto.
Eu não vou te dizer que existe uma inteligência artificial que não alucina, porque ela não existe. O que existe é diferença de grau, e é sobre esse grau que vale conversar.
Por que nenhuma chega a zero
Uma ferramenta de IA não consulta a jurisprudência como você consulta. Ela calcula, palavra por palavra, qual é a continuação mais provável do texto. Quando a continuação provável é um acórdão que encaixa perfeitamente na sua tese, ela escreve o acórdão, exista ele ou não. A decisão real raramente cai como uma luva na sua tese; a inventada cai sempre.
As ferramentas jurídicas pagas colocam uma camada por cima disso: antes de responder, buscam numa base de decisões reais e entregam os trechos ao modelo. Isso reduz a invenção, e reduz bastante. Mas o modelo que escreve a resposta final continua sendo o mesmo tipo de máquina de probabilidade. Ele pode achar a decisão certa e dizer que ela decidiu o contrário. Pode misturar duas decisões. Pode responder com segurança a uma pergunta que parte de uma premissa falsa. A base reduz o erro; não muda a natureza da ferramenta.
É como colocar um estagiário excelente para conferir o trabalho de outro estagiário. Melhora muito. Mas quem assina a peça continua conferindo, porque os dois erram com a mesma confiança.
O que já foi medido
Ninguém precisa acreditar em mim. Isso foi medido.
Testado em setembro de 2026, com Lexis+ AI, Westlaw AI-Assisted Research, Ask Practical Law AI e GPT-4, tal como avaliados pelo Stanford RegLab em 2024: o estudo, pré-registrado, submeteu 202 perguntas de pesquisa jurídica americana a três ferramentas jurídicas pagas e, como comparação, ao GPT-4 sem busca. Contou como alucinação a resposta incorreta ou a que atribui a uma fonte o que a fonte não diz. Contando todas as consultas, inclusive as que a ferramenta se recusou a responder, Lexis+ AI alucinou em 17%, Ask Practical Law AI em 17%, Westlaw AI-Assisted Research em 33% (o post do HAI arredonda para “mais de 34%”) e o GPT-4 em 43%. Os autores registram que as ferramentas jurídicas alucinam menos do que o modelo genérico e que, ainda assim, os fornecedores exageravam ao anunciar citações “livres de alucinação”, ou que “eliminavam” e “evitavam” alucinações. São números de 2024, de ferramentas americanas, sobre direito americano, em versões que já mudaram: eu os cito pelo formato do resultado, não pelo valor exato. Nenhuma chegou perto de zero, e a que menos errou errou em uma de cada seis. O retrato atual das ferramentas fica na página /ferramentas.
O que muda entre uma ferramenta e outra, portanto, não é ter ou não ter erro. É quanto erro, e principalmente: se ela te dá o link para você descobrir o erro em um minuto. Citação sem link é boato. Citação com link é uma hipótese que você confere.
O que a OAB já pediu
A Recomendação 001/2024 do Conselho Federal da OAB não distingue ferramenta paga de gratuita: menciona as duas e pede a mesma conduta. O item 3.7 diz que o advogado que usa IA em litígio deve revisar integralmente as saídas antes de apresentá-las em juízo e não confiar exclusivamente nos resultados da ferramenta. O item 3.3 diz que a dependência excessiva dessas ferramentas não substitui a análise do advogado. E o item 2.2 pede diligência na escolha do sistema, para saber como o fornecedor protege o que você coloca lá.
Repare que a recomendação vale igual para a ferramenta de assinatura e para a gratuita. Se você vai conferir de qualquer jeito, e vai, a pergunta certa sobre assinar é outra. Sobre quem responde quando a conferência falha, escrevi em quem responde pelo erro da IA na advocacia.
Quatro perguntas antes de assinar qualquer ferramenta
Qual é o seu gargalo? Onde você perde mais tempo ou mais dinheiro: pesquisa, redação, prazo, atendimento? Comece por aí, e não pela ferramenta que comentaram no grupo. Se o seu gargalo é redação, uma base de jurisprudência não resolve nada. A pergunta do gargalo está em por onde começar a usar IA no escritório.
Ela mostra a fonte? Link para o inteiro teor, número do processo, data. Se você não consegue conferir o resultado, você não consegue fundamentar, e o que importa para nós é a fundamentação. Como conferir, está em como saber se a jurisprudência que a IA citou existe.
Onde fica o seu dado? Sigilo, LGPD, contrato. A ferramenta usa o que você coloca para treinar? É o item 2.2 da recomendação, e a resposta está nos termos de uso, não na propaganda.
Você testou com um caso que conhece? Uma semana de uso, a mesma pergunta em duas ou três ferramentas, cada citação aberta. Escolha a que errou menos no seu tipo de caso e te deixou descobrir isso.
Nenhuma dessas perguntas é “qual alucina menos”. Porque a resposta para essa é sempre a mesma: todas alucinam, e a diferença que importa é quanto você consegue conferir.
Na prática
- Pegue a última pesquisa que uma ferramenta de IA fez para você, paga ou gratuita, e abra cada citação. Anote quantas existem e quantas dizem o que ela afirmou.
- Antes de assinar qualquer coisa, escreva o seu gargalo em uma linha. Se a ferramenta não ataca essa linha, não assine.
- No período de teste, faça a mesma pergunta em duas ou três ferramentas com um caso que você conhece. Compare o número de citações conferíveis, não a beleza do texto.
- Leia os termos de uso sobre treinamento e guarda de dados antes de subir qualquer documento de cliente.
- Combine com a equipe: citação sem link não entra em peça. Nem de ferramenta paga.
Fontes
- Magesh, Surani, Dahl, Suzgun, Manning e Ho, Hallucination-Free? Assessing the Reliability of Leading AI Legal Research Tools (Stanford RegLab e HAI, arXiv 2405.20362, 30 de maio de 2024) (arxiv.org)
- Magesh et al., Hallucination-Free? Assessing the Reliability of Leading AI Legal Research Tools, Journal of Empirical Legal Studies 22(2), 2025 (onlinelibrary.wiley.com)
- Stanford HAI, AI on Trial: Legal Models Hallucinate in 1 out of 6 (or More) Benchmarking Queries (23 de maio de 2024) (hai.stanford.edu)
- Recomendação n. 001/2024 do Conselho Federal da OAB, itens 2.2, 3.3 e 3.7 (Proposição 49.0000.2024.007325-9/COP) (s.oab.org.br)
Esta ideia apareceu primeiro em uma aula aberta sobre pesquisa jurídica com IA, em 5 de agosto de 2026.
Achou útil? Mande para alguém.
Compartilhar no WhatsAppCompartilhar no LinkedIn