Como Saber se a IA Está Inventando? Checklist de 5 Passos Antes de Enviar Qualquer Coisa ao Cliente

A IA escreve uma proposta em dois minutos. Às vezes, no meio dela, aparece um prazo de garantia que a sua empresa nunca ofereceu, um artigo de lei que não existe ou um preço que ninguém combinou. O texto sai bem formatado e confiante, e é justamente esse tom que faz o erro passar despercebido.

Quem usa ChatGPT, Claude ou Gemini no dia a dia da PME já viu isso acontecer pelo menos uma vez. A boa notícia é que não precisa de time técnico nem de ferramenta paga para se proteger. Neste artigo você vai entender por que a IA inventa, copiar uma instrução fixa que reduz o problema, aplicar um checklist de 5 passos antes de enviar qualquer coisa ao cliente e saber quais tarefas nunca devem sair sem revisão humana.

---

Índice

• Por Que a IA Inventa Respostas e Como Reconhecer Quando Isso Acontece

• Instrução Fixa: Faça a IA Separar o Que É Fato do Que É Suposição

• Checklist de 5 Passos Antes de Enviar Proposta, Orçamento, Contrato ou Post

• O Que Sempre Precisa de Revisão Humana: Fiscal, Jurídico, Saúde e Preço ao Cliente

• Perguntas Frequentes

• Conclusão

---

Por Que a IA Inventa Respostas e Como Reconhecer Quando Isso Acontece

A IA inventa porque foi treinada para sempre responder, e a resposta mais provável nem sempre é a verdadeira. O erro não é um defeito raro. É um efeito de como esses modelos aprendem e de como são testados.

Por que o modelo prefere chutar a dizer "não sei"

A OpenAI publicou em 5 de setembro de 2025 um texto, ligado a um artigo científico, com uma explicação simples: os modelos alucinam porque os testes padrão premiam o chute. É como uma prova de múltipla escolha. Deixar em branco garante zero, chutar dá alguma chance de acertar, então o modelo aprende a chutar.

O exemplo da própria empresa é revelador. Os pesquisadores perguntaram a um chatbot muito usado o título da tese de doutorado de um dos autores e o chatbot deu três respostas diferentes, todas erradas. Para a data de aniversário, três datas, também todas erradas.

Os números abaixo vêm de um teste da própria OpenAI com os próprios modelos, então leia como informação de quem tem interesse em mostrar o problema sendo tratado. Mesmo assim, ilustram bem. No teste SimpleQA, o modelo gpt-5-thinking-mini deixou de responder em 52% das perguntas, acertou 22% e errou 26%. O o4-mini, mais antigo, quase nunca se absteve (1%), acertou 24% e errou 75%. Acertou um pouco mais, mas inventou muito mais. Quem sempre responde erra mais.

Quais respostas merecem mais desconfiança

Nem tudo que a IA escreve tem o mesmo risco. Texto de abertura de e-mail raramente é problema. O risco está nos detalhes que parecem precisos. Desconfie mais quando a resposta traz:

• um número exato sem fonte, como "reduz 37% dos custos";

• uma lei, norma ou artigo citado pelo número;

• um preço, prazo ou taxa de uma empresa específica;

• um nome de pessoa, estudo ou livro;

• um link que você não pediu.

Tem também um mito aqui, o de que modelo novo não erra mais. Os modelos novos erram menos em alguns temas, como a própria OpenAI afirma sobre o GPT-5.5 Instant, em testes internos, mas ninguém promete zero. Menos erro não é erro nenhum.

---

Instrução Fixa: Faça a IA Separar o Que É Fato do Que É Suposição

Uma instrução fixa, colada uma vez nas configurações da ferramenta, faz a IA avisar quando está supondo. Ela não elimina o erro, mas muda o comportamento padrão: em vez de completar a lacuna com um chute confiante, o modelo passa a marcar o que não sabe. Custa um minuto e nenhum centavo.

O texto para copiar e colar

Use este texto no campo de instruções personalizadas do ChatGPT, nas instruções de um Projeto do Claude ou no início de qualquer conversa com o Gemini:

Em toda resposta, separe o que você sabe como fato verificado do que é suposição ou estimativa. Quando citar lei, número, preço, prazo, nome próprio ou link, diga de onde vem a informação. Se não souber ou não tiver certeza, escreva "não sei" em vez de completar. Nunca invente fonte, link ou citação.

O efeito é bem concreto. Ao pedir uma proposta para um cliente da área de saúde, por exemplo, a resposta passa a vir com uma linha como "estimativa minha, confirme o valor" ao lado do preço, em vez de um número solto que parece oficial.

Onde colar e o que a instrução não resolve

No ChatGPT, o lugar é a área de personalização da conta. No Claude, vale criar um Projeto da empresa e colocar o texto nas instruções dele, assim toda conversa dentro do Projeto já nasce com a regra. No Gemini, cole no começo do chat.

Agora a parte honesta: a IA pode afirmar que "tem certeza" de algo que está errado. A instrução reduz o chute, mas não vira um selo de qualidade. Por isso ela é só o primeiro passo, e o checklist da próxima seção continua necessário.

---

Checklist de 5 Passos Antes de Enviar Proposta, Orçamento, Contrato ou Post

O checklist de 5 passos funciona porque confere o que a IA mais erra: o detalhe específico. Ele leva uns cinco minutos para um texto de uma página e evita o tipo de erro que custa dinheiro ou credibilidade. Quem tem pressa pode começar só pelos passos 1 e 2.

Passos 1 e 2: números e nomes

1. Circule todo número. Preço, percentual, prazo, quantidade, data. Para cada um, pergunte: de onde vem? Se veio da sua planilha ou do seu sistema, confira lá. Se veio da IA sem fonte, apague ou substitua.

2. Confira todo nome próprio. Cliente, cidade, produto, concorrente, autor, empresa citada. IA troca letra, inventa sobrenome e atribui frase a quem nunca disse.

Imagine, como cenário hipotético, uma oficina que pede à IA um texto de orçamento para uma frota de vans. A IA escreve "garantia de 12 meses nas peças" porque é uma frase comum em orçamento. A oficina oferece 90 dias. Sem o passo 1, o cliente recebe uma promessa que a empresa vai ter de cumprir ou desmentir.

Passos 3 e 4: leis, regras e links

3. Procure a fonte de toda lei, norma ou regra citada. Não basta o nome. Abra o texto oficial e confirme que o artigo existe e diz o que a IA afirma. Se não achar, tire a citação.

4. Clique em todo link e abra toda referência. Link inventado costuma ter cara de real, com domínio verdadeiro e caminho que nunca existiu. Se a página não abre ou não diz o que o texto afirma, o link sai.

Passo 5: a pergunta de revisão para a própria IA

5. Peça à IA que se audite. Cole a resposta de volta e peça:

Releia sua resposta. Liste cada número, lei, prazo, preço, nome próprio e link que você citou. Para cada um, diga se é fato que você tem certeza, estimativa ou suposição, e marque o que eu preciso conferir em fonte oficial.

Esse passo não substitui os quatro anteriores. Ele serve de lista de pontos de atenção, e mostra onde o modelo mesmo admite que chutou. Quem conhece o guia de prompts estratégicos vai reconhecer a lógica: pedir ao modelo que critique o próprio trabalho costuma render mais que pedir só a primeira versão.

Se a sua empresa já tem uma política de revisão, use este checklist como o "como" dela. A política de uma página do artigo sobre marca d'água em texto de IA diz quem revisa e quando. Aqui está como revisar.

---

O Que Sempre Precisa de Revisão Humana: Fiscal, Jurídico, Saúde e Preço ao Cliente

Quatro áreas nunca devem sair da IA direto para o cliente: fiscal, jurídica, saúde e preço. Nelas um erro não vira só vergonha. Vira multa, ação, dano a alguém ou prejuízo direto. A regra vale para qualquer tamanho de empresa, e para qualquer ferramenta.

As quatro áreas e o que revisar em cada uma

Na área fiscal, como imposto, nota e enquadramento, confirme com quem cuida da sua contabilidade. O artigo sobre IA em escritório de contabilidade mostra o que vale automatizar e o que exige conferência. Na área jurídica, cláusula e prazo legal passam por quem entende de contrato, não só pelo olho do gestor. Em saúde, qualquer orientação sobre sintoma, dose ou procedimento precisa de profissional habilitado. E preço ao cliente, o quarto item, sempre sai da sua tabela, nunca da memória do modelo.

Quando o erro da IA vira responsabilidade da empresa

O caso mais conhecido é o da Air Canada. Segundo a análise do escritório Manatt, o chatbot da companhia disse a um passageiro que ele podia comprar a passagem normal e pedir reembolso parcial da tarifa de luto em até 90 dias. Não era o que a política da empresa dizia. O Civil Resolution Tribunal da Colúmbia Britânica, no Canadá, mandou a empresa reembolsar o cliente (cerca de 650 dólares canadenses, mais juros e taxas) e concluiu que ela não tomou o cuidado razoável de garantir a precisão do chatbot. A Air Canada tentou tratar o chatbot como entidade separada. O tribunal rejeitou a tese.

A lição vale para a PME brasileira com agente de atendimento no WhatsApp: o que a IA diz em nome da empresa é dito pela empresa. Antes de colocar um agente para responder clientes, defina o que ele pode afirmar sozinho e o que precisa encaminhar a uma pessoa. O guia sobre agente de IA no WhatsApp ajuda a desenhar essa fronteira.

---

Perguntas Frequentes

Como saber se a IA está inventando uma informação? Desconfie de número exato sem fonte, lei citada pelo número, preço ou prazo de empresa específica, nome de estudo e link que você não pediu. Confira cada um na fonte oficial. Se a IA não mostra de onde veio, trate como suposição.

Por que o ChatGPT inventa informação com tanta confiança? Segundo a OpenAI, os testes padrão premiam o chute e não a admissão de incerteza, como uma prova de múltipla escolha em que deixar em branco vale zero. O modelo aprende a sempre responder, mesmo sem saber.

Existe um prompt para a IA parar de inventar? Existe um que reduz, não que elimina. Peça que a IA separe fato de suposição, diga a origem de cada número, lei, preço e link, e escreva "não sei" quando não souber. Depois confira o que ela citar.

Modelos mais novos de IA ainda inventam informação? Sim. Os novos costumam errar menos em alguns temas, mas a OpenAI e as demais empresas não prometem zero. A conferência humana continua necessária, principalmente em tarefas fiscais, jurídicas, de saúde e de preço.

A empresa responde por um erro cometido pelo chatbot de atendimento? No caso da Air Canada, o tribunal canadense entendeu que sim, que a empresa é responsável pelo que o chatbot diz. No Brasil, converse com assessoria jurídica antes de colocar um agente para responder clientes sozinho.

Quanto tempo leva para revisar um texto feito com IA? Para uma proposta de uma página, cerca de cinco minutos com o checklist de 5 passos. É bem menos do que o tempo de corrigir um erro depois que o texto chegou ao cliente.

---

Conclusão

A IA inventa porque foi treinada para responder, e inventa com a mesma firmeza com que acerta. Isso não torna a ferramenta inútil. Torna a revisão parte do trabalho. Você viu aqui uma instrução fixa que faz o modelo separar fato de suposição, um checklist de 5 passos (números, nomes, leis, links e auditoria da própria IA) e as quatro áreas que nunca saem sem revisão humana: fiscal, jurídica, saúde e preço ao cliente.

O próximo passo é pequeno. Cole a instrução fixa hoje nas configurações da ferramenta que a sua equipe mais usa, imprima o checklist e deixe ao lado do computador de quem escreve propostas. Comece pelos textos que vão para cliente e ajuste depois de duas semanas. Se preferir apoio para montar essas regras e desenhar o que um agente de atendimento pode ou não responder sozinho, conheça os Serviços de IA para PMEs da Mente Tech.

---

IA Acessível Para Sua Empresa

Ao contrário do que muitos pensam, inteligência artificial não é exclusividade de grandes corporações. Pequenas e médias empresas podem (e devem) usar IA como vantagem competitiva. Descubra soluções práticas e acessíveis para implementar IA no seu negócio, independentemente do setor.

Fale com a gente e descubra como começar

Newsletter Semanal: IA Descomplicada

Receba toda semana conteúdos práticos que desmistificam a inteligência artificial para PMEs. Aprenda como IA pode ser sua aliada, com exemplos reais, custos acessíveis e implementações simples para qualquer tipo de negócio.

Inscreva-se gratuitamente

---

Referências

• OpenAI: Why language models hallucinate (5 de setembro de 2025)

• Kalai et al.: Why Language Models Hallucinate (arXiv)

• Manatt: AI Gone Wild, Airline Has to Honor a Refund Policy Its Chatbot Fabricated

mentetech.com.br/post/como-saber-se-a-ia-esta-inventando-checklist-de-5-passos-antes-de-enviar-qualquer-coisa-ao-cliente