MMMU-Pro
引用頻度 3/3
- 何を測定しますか?
- 大学レベルの30科目で図・表・グラフを含む問題を解くMMMUを難しくした版で、画像を読んで推論する力を見ます。
- 誰がどのように評価しますか?
- 文章だけで解ける問題を除き、選択肢を10個に増やし、問題全体を1枚の画像で渡す方式も加えました。
- スコアの読み方
- スコアは0〜100%です。高いほど良い結果です。公式ランキングは大半が開発元の発表を集めたもので、データの利用条件が確認できないため、ここには開発元の発表原文からツールなしで測った値だけを載せています。
このランキングは、モデルの開発元が自ら発表したスコアだけで作っています。ツール使用の有無や推論強度などの測定条件が開発元ごとに異なるため、モデル同士を直接比べるときは各スコアの条件もあわせて確認してください。
最高スコア83.6%
測定したモデル37件
測定基準高いほど良い画像入力モデルのみ
最終更新2026.09.20
モデルのリリース時期
多くの人に最も好まれる写真・図表についての回答をするAIは?Arena Vision
Claude Fable 5🥇
Claude Fable 5🥇Arena Vision
Claude Fable 5🥇組み立て写真を見て、間違った手順を見つけられる?Furniture Assembly
Claude Fable 5.2🥇
Claude Fable 5.2🥇Furniture Assembly
Claude Fable 5.2🥇家の中の写真数枚から、間取り図を描ける?Blueprint-Bench 2
GPT-6.2 Astra🥇
GPT-6.2 Astra🥇Blueprint-Bench 2
GPT-6.2 Astra🥇
大学レベルの図や表の問題を解ける?
MMMU-Pro
- 🥇GoogleGemini 3.5 Flash83.6%
- 🥈OpenAIGPT-5.6 Sol83.0%
- 🥉Moonshot AIKimi K3推論強度: Max81.6%
- #4GoogleGemini 3 Flash推論強度: Thinking81.2%
- #4OpenAIGPT-5.5推論強度: Extra High81.2%
- #4OpenAIGPT-5.4推論強度: Extra High81.2%
- #7OpenAIGPT-5.6 Terra80.7%
- #8GoogleGemini 3.1 Pro推論強度: High80.5%
- #9MetaMuse Spark推論強度: Thinking80.4%
- #10Moonshot AIKimi K2.6推論強度: Thinking79.4%
- #11AlibabaQwen3.7 Plus79.0%
- #11AlibabaQwen3.5 397B A17B推論強度: Thinking79.0%
- #13AlibabaQwen3.6 Plus78.8%
- #14Moonshot AIKimi K2.5推論強度: Thinking78.5%
- #15OpenAIGPT-5.6 Luna78.4%
- #16ByteDanceDola Seed 2.0 Pro78.2%
- #17MiniMaxMiniMax M378.1%
- #18XiaomiMiMo V2.577.9%
- #19GoogleGemma 4 31B76.9%
- #20GoogleGemini 3.1 Flash Lite推論強度: High76.8%
- #21OpenAIGPT-5.4 Mini推論強度: Extra High76.6%
- #22StepfunStep-5推論強度: High76.0%
- #22ByteDanceDola Seed 2.0 Lite76.0%
- #24AlibabaQwen3.6 Flash75.3%
- #24AlibabaQwen3.6 35B A3B75.3%
- #26AnthropicClaude Sonnet 4.6推論強度: Max74.5%
- #27AnthropicClaude Opus 4.6推論強度: Max73.9%
- #28ByteDanceDola Seed 2.0 mini71.4%
- #29AnthropicClaude Opus 4.5推論強度: Max70.6%
- #30BaiduERNIE 5.0 Thinking68.6%
- #31GoogleGemini 2.5 Pro推論強度: Thinking68.0%
- #32OpenAIGPT-5 Mini推論強度: High67.5%
- #32AnthropicClaude Sonnet 4.5推論強度: Max67.5%
- #34GoogleGemini 2.5 Flash推論強度: Thinking66.7%
- #35OpenAIGPT-5.4 Nano推論強度: Extra High66.1%
- #36AmazonNova 2 Lite61.8%
- #37GoogleGemini 2.5 Flash Lite推論強度: Thinking51.0%
モデルの半数が76.9%以下測定: 開発元の発表
「作業ツール」はAIが課題を解くときに使った実行環境(エージェントプログラム)です。同じモデルでも作業ツールと推論の強さによってスコアが大きく変わることがあります。