ทันเอไอ

Y Combinator 출신 AI Agents 분석 도구 'Agnost AI' 출시

Y Combinator(S26 배치) 출신의 차세대 프로덕트 분석 플랫폼 Agnost AI가 기존 평가 방식으로는 포착하기 어려운 AI Agents의 오류를 감지한다.

다양한 애플리케이션에서 AI Agents 도입이 증가하는 가운데, 실제 사용자와의 대화에서 발생하는 정확도 문제를 모니터링하는 것이 개발자들의 주요 과제로 떠올랐다. 이에 Agnost AI는 이러한 문제를 해결하기 위해 설계된 프로덕트 분석(Product Analytics) 플랫폼을 공개했다.

Agnost AI의 핵심 기능은 실제 운영 환경에서 사용자와 AI Agent 간의 대화를 분석하여, 기존 모니터링 시스템에서 놓치기 쉬운 조용한 실패(Silent failures), 동작 편향(Drift), 환각 현상(Hallucinations), 사용자 불만 및 이탈 징후 등을 감지하는 것이다.

또한 대화 데이터를 바탕으로 패턴을 분석해 평가 프로세스(Evals)를 개선하고, 코드 수정을 위한 Pull Request 생성 등 구체적인 해결책도 제시한다. Agnost AI는 현재 Y Combinator S26 배치에 참여 중이다.