Agnost AI: lançada ferramenta de análise de falhas em AI Agents da Y Combinator
A Agnost AI, nova plataforma de product analytics da Y Combinator (turma S26), detecta falhas em AI Agents que avaliações tradicionais não conseguem identificar.
Com o avanço do uso de AI Agents em aplicativos, um dos maiores desafios para desenvolvedores é monitorar a precisão das interações com usuários reais. Para solucionar esse problema, a Agnost AI lançou uma plataforma de product analytics desenvolvida sob medida.
A principal função da Agnost AI é monitorar conversas em produção entre usuários e AI Agents para identificar falhas que ferramentas convencionais costumam ignorar, como falhas silenciosas (silent failures), desvios de comportamento (drift), alucinações (hallucinations), insatisfação do usuário e sinais de abandono.
Além de detectar problemas, a plataforma analisa padrões nas conversas para aprimorar o processo de avaliação (evals) e sugere correções práticas, como a criação de Pull Requests para ajustar o código. Atualmente, a Agnost AI faz parte do programa de aceleração da Y Combinator (S26).
Permite que desenvolvedores de IA monitorem e corrijam falhas em AI Agents com maior precisão, reduzindo erros operacionais e aumentando a satisfação dos usuários.