Automação com IA · Frente 3
Base de conhecimento e limites: o que a IA sabe, o que ela nunca diz e como é testada
Tão importante quanto o que a IA sabe é o que ela não pode fazer.
Efeito Digital · BrasíliaAtualizado em 23 de outubro de 20264 min de leitura
Em resumo
A frente de base de conhecimento e limites organiza o material que a IA consulta, escreve as instruções de comportamento, define o que ela nunca pode fazer, testa com perguntas comuns, difíceis e maliciosas e versiona cada mudança. Na Efeito Digital, de Brasília, essa frente vale para todos os agentes do projeto, de atendimento ao cliente a assistentes internos, e nada vai para o ar sem aprovação.
IPor que limite escrito vale tanto quanto conhecimento
Um estagiário inteligente, sem orientação, vai tentar ajudar em tudo. Inclusive no que não deveria: dar desconto, prometer prazo, opinar sobre o concorrente. A IA tem o mesmo impulso de ser útil, e por isso precisa de cerca.
Essa frente escreve a cerca. Além de organizar o material, ela define em texto o tom, o tamanho das respostas, o jeito de lidar com cliente irritado e a lista de proibições. Depois submete o agente a uma bateria de testes, incluindo perguntas feitas para tentar enganá-lo, e registra o que passou e o que foi corrigido.
Agente sem limite escrito é risco de marca, não economia de tempo.
IISinais de que os seus agentes precisam de base e limites
- A IA inventa informaçãoResponde com confiança o que não está em lugar nenhum.
- Promessas que ninguém autorizouPrazo, desconto ou condição especial dados no improviso.
- Tom que muda de conversa para conversaÀs vezes formal demais, às vezes íntimo demais.
- Ninguém sabe o que mudouO agente passou a responder diferente e não há registro de alteração.
- Agentes internos com acesso amploAssistente que lê dados que não precisaria ler.
IIIO que vem dentro da base e regras do agente
O entregável é um documento versionado com material oficial, instruções e limites aprovados por você, mais o relatório de testes.
| Parte | Exemplo |
|---|---|
| Material consultável | Políticas, tabelas, perguntas frequentes e processos internos |
| Instruções de comportamento | Responder em até três frases, sem gíria, sempre oferecendo falar com uma pessoa |
| Proibições | Preço fora da tabela, promessa de prazo, opinião sobre concorrente, dado pessoal de terceiros |
| Bateria de testes | Perguntas comuns, difíceis e maliciosas, com resultado e correção |
| Histórico de versões | Data, autor e motivo de cada mudança |
IVQuanto tempo leva
Em média, a base e os limites são construídos entre a segunda e a terceira semana do projeto, logo depois do mapeamento e antes da configuração final dos agentes. A bateria de testes se repete sempre que a base ou as instruções mudam.
VComo essa frente se conecta às outras
- Agentes de IACada agente usa a parte da base que corresponde à sua função.
- Supervisão, segurança e evoluçãoOs erros encontrados na operação voltam para a base como correção versionada.
- Base de conhecimento do WhatsAppNo atendimento ao cliente pelo WhatsApp, a mesma lógica é aplicada com foco nas perguntas dos clientes.
VIErros comuns de governança de IA
- Instrução vagaSeja educado não diz nada. Responda em até três frases e ofereça um humano diz.
- Testar só pergunta fácilO problema aparece na pergunta mal escrita e na provocação.
- Mudar sem registrarO comportamento muda e ninguém sabe por quê.
- Material contraditórioDuas versões da mesma política geram respostas diferentes.
VIIComo é uma bateria de testes
A bateria reúne três grupos de perguntas. As comuns, tiradas das conversas reais. As difíceis, com erro de digitação, áudio transcrito mal ou duas perguntas na mesma mensagem. E as maliciosas, que tentam fazer o agente sair do papel, revelar instruções ou prometer o que não pode. Cada resposta é marcada como aprovada ou corrigida, e o agente só vai para o ar quando os casos críticos passam.
Passo a passo
Como a gente faz, na ordem
- 01Organização do materialA gente transforma políticas, tabelas, perguntas frequentes e processos internos numa base consultável, removendo versões contraditórias. Ferramentas: Google Drive ou Notion e a base do agente.
- 02Instruções de comportamentoEscrevemos como regra o tom de voz, o tamanho de resposta, o idioma e o jeito de lidar com cliente irritado.
- 03Limites e proibiçõesListamos o que a IA nunca faz, como preço fora da tabela, promessa de prazo, opinião sobre concorrente e dado pessoal de terceiros.
- 04Bateria de testesTestamos perguntas comuns, difíceis e maliciosas antes de ligar, com registro do que passou e do que foi corrigido.
- 05VersionamentoRegistramos cada mudança na base ou nas instruções com data e responsável, para saber o que mudou quando o comportamento mudar.
Perguntas frequentes
O que costumam perguntar
Como evitar que a IA invente respostas?
Limitando o agente a responder a partir de uma base aprovada, instruindo-o a dizer que não sabe e encaminhar quando a informação não está lá, e testando esse comportamento antes de ir para o ar.
O que é versionar a base de conhecimento?
É registrar cada alteração no material ou nas instruções com data, autor e motivo. Assim, se o agente mudar de comportamento, dá para saber o que causou e voltar atrás.
Quem aprova a base?
Alguém da sua empresa que conhece o assunto, definido no início do projeto. A Efeito escreve e organiza. A aprovação é sua.
A IA pode ser enganada por um cliente?
Pode tentar ser. Por isso a bateria inclui perguntas maliciosas e as instruções deixam claro o que o agente nunca faz, independentemente do pedido.
Os limites valem para agentes internos?
Valem. Um assistente interno também precisa de regras sobre que dados acessa, o que pode alterar e quando pedir confirmação.
Quem pode alterar as instruções do agente depois de aprovado?
Só as pessoas definidas no projeto, normalmente um responsável da sua empresa e o time da Efeito. Toda alteração passa pela bateria de testes dos casos críticos e fica registrada no histórico de versões.
Continue
Próximo passo
Vamos começar pelo diagnóstico?
Conta pra gente o momento da sua empresa. A gente responde no WhatsApp, marca uma conversa e, se fizer sentido, audita suas contas antes de qualquer proposta.
- Resposta no mesmo dia útil
- Conversa com quem executa, não com um robô de vendas
- Sem compromisso e sem proposta empurrada