SalesforceがAIエージェントのデータ報告精度を向上
- •SalesforceはAIエージェントが企業データの照会時に一貫性のない不正確な回答を生成する課題を特定した。
- •SlackbotによるMQL照会で378,591件および291,256件という不正確な数値が算出され、正確なダッシュボード数値の492,298件と乖離した。
- •Salesforceは認証済みデータセット、セマンティックモデル、AIスキルを基盤に組み込むことで報告エラーを解決した。
Salesforceは、AIエージェントが適切なデータグラウンディングの欠如と非決定的な動作により、企業環境で自信過剰かつ不正確な回答を生成する傾向があることを報告した。このリスクの一例として、2027年度第1四半期の事例が挙げられる。Slackbotを介して「マーケティング対象リード(MQL)」を照会したところ、378,591および291,256という数値がそれぞれ返されたが、いずれも社内の権威あるLeads Tableau Dashboardが報告した492,298とは一致しなかった。この不一致は、Slackbotが期間終了時のスナップショットや定義されたファネル段階のような特定のビジネスロジックを含む認証済みデータセットではなく、生のリアルタイムリードオブジェクトを直接照会していたことに起因する。
この精度問題を解決するため、同社は3段階のフレームワークを導入した。第一に、エージェントに対してアドリブではなく特定の認証済みテーブルやフィルタを使用するよう指示する構造化されたMarkdown形式の「AI Skills」を構築した。第二に、Tableau MCPサーバーを活用し、Slackbotとセマンティックモデルを接続することで、生のデータを管理された機械可読なビジネスロジックに変換した。最後に、エージェントをマーケティングデータウェアハウス(MDW)の認証済みデータセットにグラウンディングさせることで、全ての照会が最高データ責任者(Chief Data Office)によって維持される公式の「唯一の真実のソース」から引き出されることを保証した。
このアプローチにより、Slackbotの出力はLeads Tableau Dashboardと一致し、一貫して正確な数値である492,298を返すようになった。Salesforceはこの戦略を、データは商用製品と同じくらい信頼性が高く発見可能であるべきだとする「データ・アズ・ア・プロダクト」の哲学に基づいて展開している。この移行により、技術者以外のユーザーがエンタープライズ報告の整合性を損なうことなく、自然言語を通じて複雑な指標にアクセスできるようになる。社内の知見をAI Skillsとセマンティックモデルに体系化することで、部門間の連携が向上し、全てのAI生成指標に対する自動監査証跡の作成が可能になった。