Jevals HelpSteer2

高いほど良い

AIの回答300件について、人がつけた5段階の役立ち度を当てる試験です。段階ごとにつけた確率を採点するDecision Scoreで評価し、0は段階の割合だけを知る基準線で、それより悪いとマイナスになります。独立運営のサイトJevalsが測ります。スコアは出典の発表値そのままです。高いほど良い結果です。

他のバージョン:Jevals Banking77Jevals PubMedQA
最高スコア9.20Jev 1.13
測定したモデル6件
最終更新2026.09.18
モデルのリリース時期(右が最新)
その時点の最高記録上ほど良い
  1. 🥇TypeSafeJev 1.139.20
  2. 🥈Z.aiGLM 5.37.78
  3. 🥉GoogleGemini 3.8 Flash4.59
  4. #4AlibabaQwen3.8 Flash-1.37
  5. #5Mistral AIMistral Medium 3.5-13.7
  6. #6DeepSeekDeepSeek V4.1 Flash-19.0
上位6件は誤差の範囲内 · 事実上の同率1位 · モデルの半数が1.61以下最終更新 2026-10-06