AI エージェントの真の価値を可視化する Voker の登場
Launch HN: Voker (YC S24) – Analytics for AI Agents
Voker は、AI エージェントが単に返信しているだけでなく、実際にユーザーを支援しているかを確認するための分析プラットフォームです。エンジニアの負担を減らし、PM やビジネスチームが独自にエージェントのパフォーマンスや ROI を測定できるよう設計されています。OpenAI や Anthropic などの主要モデルと連携し、会話データから意図や解決率を自動検知することで、製品改善を加速させます。
トレースをスキャンしても、エージェントが有用で正確かどうかは分かりません。顧客が不満を訴えるか、離脱率が急上昇するまで気づかないことがほとんどです。
HNでの議論
22- jorisw
販売サイトに関するいくつかのメモ。
- 私には、最初のスクリーンショットである直上の画像と、「あなたのエージェントがユーザーに何を言っているのか、本当にわかっていますか？」という文言が全く一致しません。一見すると、そのスクリーンショットは単に「何かしらの分析アプリ」であることを示しているだけです。おそらく、最初のグラフィックは、エージェントの活動のどの部分がより簡単に検査可能になっているのかを、より良く表現できるはずです。
- 「How it Works」をクリックすると、漠然と説明されたスクリーンショットが表示されるだけです。4番目のスクリーンショットにある Python の import 行を読むまで、OpenAI の import に代わって動作するミドルウェアであることがわかりませんでした。もしかすると、このナビゲーションは、3 つの統合ステップがある上記のセクションにリンクするべきかもしれません。
- 下にスクロールして「Intents vs Corrections vs Resolutions」を見ると、Voker が何をしているのかようやく理解できました。それでも私には、「あなたのエージェントがユーザーに何を言っているのか、本当にわかっていますか？」という文言と完全に一致しているとは感じられません。
- ホワイトボード付きの机の男が、ChatGPT からロードマップの提案をコピーしているという事実に、少し楽しさを感じます。
- akslp2080
Langfuse と何が違うのでしょうか？道から外れているかもしれませんが、Langfuse もエージェントの行動や意思決定の詳細なトレースを提供しています。
- Damianf19
ツールやポリシーが大きく異なるエージェントを比較するためのデータモデルはどのようなものですか？「ユーザーが実際に何を達成したか」というレイヤーで正規化するのか、それとも生のトークン/ターン指標で正規化するのか気になります。なぜなら、これら2つは「このエージェントが機能しているか」について全く異なる姿を描き出すからです。私たちは自社製品の評価側（エージェントではなくメールパイプラインの成果ですが、形状は同じ）でこの問題に直面しています。
- Ozzie_osman
チームメンバーがここにいらっしゃるなら、Amplitude のエージェント分析（https://amplitude.com/ai-agents）のようなものとどう比較できるのか、ぜひ理解したいです。
- arm32
Alex と Tyler、こんにちは！あなたのアイデアは素晴らしいです。メールで連絡していただけませんか？一緒に作業について話したいです。