Jevals HelpSteer2
高いほど良い
AIの回答300件について、人がつけた5段階の役立ち度を当てる試験です。段階ごとにつけた確率を採点するDecision Scoreで評価し、0は段階の割合だけを知る基準線で、それより悪いとマイナスになります。独立運営のサイトJevalsが測ります。スコアは出典の発表値そのままです。高いほど良い結果です。
最高スコア9.20Jev 1.13
測定したモデル6件
最終更新2026.09.18
モデルのリリース時期(右が最新)
その時点の最高記録上ほど良い
韓国語・日本語で、基準どおり正確に分類できる?AIB DecisionBench-KJ
Jev 1.13🥇
Jev 1.13🥇顧客の問い合わせを、適切な種類に振り分けられる?Jevals Banking77
Gemini 3.8 Flash🥇
Gemini 3.8 Flash🥇さまざまな業務分野で、判定を正確に下せる?Decision Index
Jev 1.13🥇
Jev 1.13🥇
- 🥇TypeSafeJev 1.139.20
- 🥈Z.aiGLM 5.37.78
- 🥉GoogleGemini 3.8 Flash4.59
- #4AlibabaQwen3.8 Flash-1.37
- #5Mistral AIMistral Medium 3.5-13.7
- #6DeepSeekDeepSeek V4.1 Flash-19.0
上位6件は誤差の範囲内 · 事実上の同率1位 · モデルの半数が1.61以下最終更新 2026-10-06