Microsoft-Decision-1

Microsoft-Decision-1は、Microsoftが初めて出した判断専用のAIで、文章を書く代わりに、はい・いいえ、選択肢、スコアを確率とともに返します。同じ会社のMAIモデルが画像を描いたり音声を書き起こしたりするのに対し、このモデルは問い合わせの分類、依頼を適切な担当に振り分けること、AIの回答の採点、エージェントの次の行動を止めるべきかの判断を担います。アリババのQwenの小型モデルをもとに学習し直したもので、私たちが韓国語・日本語で測った判断テストではJevやPerplexity Deciderと同じくらいの水準で、選択肢の順番を入れ替えても答えがほとんど揺れませんでした。一方で、試験の知識を問う問題や、二つの回答のうち良いほうを選ぶ問題は弱めで、確率として示す自信が実際の正答率とあまり合っていません。文章しか読めず、長い文書を一度に入れるのは難しく、会社が中身を更新し続けて提供しているため、同じ名前でも時期によって結果が変わることがあります。