ReasoningBank:AIエージェントに「記憶」を授ける技術
- •ReasoningBankは、AIエージェントが導入後の成功や失敗から学習することを可能にする。
- •WebArenaにおいてタスク成功率を8.3%向上させ、運用効率を改善した。
- •Memory-aware test-time scaling(MaTTS)が、エージェントの記憶と計算集約的な探索を組み合わせ、卓越した性能を実現。
自律的なデジタルエージェントの開発において、研究者たちは常に「忘却」という壁に直面してきた。現在のAIモデルは新しいタスクに直面するたびに過去をリセットし、同じ戦略的ミスを繰り返す傾向がある。ReasoningBankはこのパラダイムを一変させ、エージェントが自身の行動履歴を継続的改善のための教科書として活用できるフレームワークを提供する。
従来の手法は単に膨大な行動ログを記録するだけであったが、ReasoningBankは「蒸留」に焦点を当てている。これは認知フィルターのように機能し、成功と失敗の両方から「戦術的先見性」と呼ばれる構造化された洞察を抽出する。エージェントは失敗を明示的に分析することで、単に成功パターンを模倣するのではなく、具体的な落とし穴を回避するための内部的な安全装置を構築する。
Googleの研究者らは、失敗こそがエージェントの自己進化において最も価値のあるデータ点であると強調している。システムは失敗を反実仮想の信号として処理し、再発防止ルールを生成する。これにより、単なる手順の実行を超えて「なぜその行動をとるのか」「いつその判断を下すべきか」という背景までを学習するようになる。
このフレームワークの中核を成すのが「Memory-aware test-time scaling(MaTTS)」だ。通常、推論時のスケーリングでは探索データが廃棄されることが多いが、MaTTSはこれらの中間ステップをリアルタイムの推論改善に利用する。単一のクエリに対して複数の試行経路を生成し、成功と失敗を対比させることで、システムは常にメモリを更新し続ける。
これは、チャットウィンドウを閉じればすべてを忘れる「ステートレス」なAIから、経験を内面化して成熟する「パーシステント」なAIへの移行を意味する。AIが自らの運用履歴から学習し進化する能力を手に入れることで、個人のリサーチアシスタントや自律的なコーディングパートナーとしての有用性は飛躍的に高まるだろう。