Prontidão é uma condição relativa ao trabalho que o agente executará. Responder dúvidas sobre medidas exige fontes confiáveis do catálogo. Cancelar um pedido acrescenta identidade, regras comerciais e controle de efeitos. Dar a mesma nota geral para essas duas tarefas esconde diferenças relevantes.
O grafo interno é útil quando explicita relações que os sistemas precisam consultar: qual oferta pertence a qual item, qual política vale naquele canal e qual pedido originou uma solicitação. Ele pode começar como um modelo documentado sobre sistemas existentes, sem exigir um novo banco de dados especializado.
Neste guia
Qual tarefa merece entrar no primeiro teste?
Escolha uma pergunta recorrente com resultado verificável e consequência controlável. Comparar dimensões de produtos é diferente de prometer entrega para um endereço. No segundo caso, o agente precisará consultar condições atuais e informar limites; uma página antiga de política não basta para calcular a promessa.
Descreva entrada, saída esperada, fontes autorizadas e ações proibidas. Essa ficha deve caber em uma revisão entre operação e tecnologia. Se ninguém consegue dizer o que caracteriza uma resposta correta, ainda falta definição do processo, mesmo que a demonstração do agente pareça convincente.
Quais relações de dados são realmente necessárias?
| Tarefa | Relação mínima a verificar |
|---|---|
| Explicar um produto | Item e atributos aprovados da variante. |
| Comparar ofertas | Item, vendedor e condições comerciais válidas. |
| Consultar entrega | Pedido autorizado e eventos de transporte correspondentes. |
| Solicitar cancelamento | Pedido, identidade, regra aplicável e ação permitida. |
Evite reunir perfis de clientes quando a tarefa não depende deles. Resolução de identidade pode ser importante em jornadas que atravessam canais, mas não é pré-condição para explicar uma ficha técnica pública. O desenho deve justificar cada dado pessoal que entra na consulta.
Como tratar fontes que discordam entre si?
Defina qual sistema responde por cada informação e qual atualização é aceitável. O catálogo pode governar medidas; a plataforma comercial, o preço; o sistema de pedidos, o andamento de uma compra. Copiar tudo para um repositório de consulta não transfere automaticamente a autoridade dessas fontes.
Em um exemplo hipotético, a base de respostas informa entrega em três dias, enquanto a cotação atual mostra sete. O agente deve usar a condição válida para aquela consulta ou declarar que não conseguiu confirmá-la. Não deve escolher a informação mais favorável para manter a conversa fluida.
Quando houver conflito, registre o campo, as fontes e a decisão tomada. A correção precisa voltar ao responsável pelo dado. Revisar apenas o texto da resposta deixa a divergência disponível para a próxima consulta e impede descobrir quantos casos foram afetados.
Como avaliar prontidão sem inventar uma nota universal?
Monte uma rubrica local por tarefa, com situações aprovadas, reprovadas e ainda não testadas. Avalie precisão do dado, atualização, permissão, recuperação de falha e rastreabilidade. Um conjunto de dimensões pode ajudar a organizar a discussão, mas não constitui uma certificação geral de prontidão.
O aceite deve incluir perguntas sem resposta, fonte indisponível e tentativa de executar uma ação fora do escopo. Para tarefas que alteram pedidos, teste também repetição da chamada. O resultado precisa mostrar o que ocorreu no sistema de negócio, não apenas a frase que o agente apresentou.
Quando faz sentido ampliar o acesso do agente?
Amplie depois de observar erros, custo de revisão humana e capacidade de interrupção no caso inicial. Um agente que responde bem a perguntas não herda permissão para comprar ou cancelar. Cada nova ação exige dados, limites e testes próprios, incluindo o caminho de atendimento quando a automação falha.
O curso RAG em produção ajuda a entender recuperação de fontes e avaliação de respostas; MCP para quem decide trata das interfaces com ferramentas. Para começar, escolha uma tarefa e documente cinco casos normais, três exceções e a fonte responsável por cada resposta. Use esses casos para decidir o próximo acesso.