Agnost AI: Wenn deine Evals bestehen, aber die Produktion scheitert
Launch HN: Agnost AI (YC S26) – Extract user feedback from agent conversations
Agnost AI, ein Y-Combinator-Startup (S26), analysiert echte Nutzergespräche mit KI-Agenten, um Fehler zu finden, die herkömmliche Evals übersehen. Das Tool extrahiert automatisch Intentions- und Sentiment-Signale, erkennt Misserfolge und schlägt Verbesserungen vor. Es überzeugt durch konkrete Ergebnisse: Bei Odysser wurden 1.247 Feature-Requests aus Chats aufgedeckt, bei Lopus AI 16 von 18 PRs automatisch gemerged. Agnost bietet eine kostenlose Starter-Version, einen Pro-Plan für 499 $/Monat und Enterprise-Optionen an.
Agnost AI zeigte mir, dass Nutzer nach Funktionen fragten, die wir gar nicht haben. Ich hatte keine Ahnung. Das gesamte Feedback steckte einfach in Gesprächen, die wir bereits führten.