LiveBench Language v1
- 무엇을 측정하나요?
- 언어를 얼마나 정확히 다루는지입니다. 단어 묶음 퍼즐(Connections), 논문 초록의 오타 찾기, 뒤섞인 영화 줄거리 순서 맞추기처럼 읽기와 언어 감각이 필요합니다.
- 누가 어떻게 평가하나요?
- Abacus.AI·뉴욕대 등 연구진이 만든 LiveBench 는 최근 대회 문제·논문·뉴스에서 매달 새 문제를 내어, AI 가 학습 중에 문제를 미리 봤을 가능성(오염)을 줄입니다. 답이 정해진 문제만 내고 프로그램이 자동 채점하며 다른 AI 가 채점하지 않습니다. 이 표는 livebench.ai 가 공개한 최신 월간 결과표를 가져오되, 최신 표에서 빠진 AI 는 마지막으로 실린 점수를 순위 없이 표 아래에 따로 보여 줍니다. 언어 과목은 Connections 퍼즐, arXiv 초록 오타 제거, 최신 영화 줄거리 재배열 과제로 구성됩니다.
- 점수 읽는 법
- 0~100점입니다. 문항이 어렵게 설계돼 최상위 AI 도 70점을 넘기기 어려우며, 매달 문제가 바뀌므로 시점이 다른 점수는 직접 비교하지 않는 것이 좋습니다. 영어 기준이라 한국어 실력과는 직접 관계가 없습니다.
순위
최고 점수90.7
측정한 모델52개
측정 기준높을수록 좋음
최근 갱신2026.06.25
모델 출시 시기
대중들이 가장 선호하는 글쓰기·문학 답변을 하는 AI는?Arena Writing, Literature & Language
Gemini 4 Carbon🥇
Gemini 4 Carbon🥇Arena Writing, Literature & Language
Gemini 4 Carbon🥇대화가 길어질 때 대중들이 가장 선호하는 AI는?Arena Multi-turn
Gemini 4 Carbon🥇
Gemini 4 Carbon🥇Arena Multi-turn
Gemini 4 Carbon🥇어려운 대화에서 상대의 마음을 읽고 잘 대응할까?EQ-Bench 4
Claude Opus 5🥇
Claude Opus 5🥇EQ-Bench 4
Claude Opus 5🥇
낱말 퍼즐·맞춤법 같은 언어 감각이 좋을까?
LiveBench Language v1
- 🥇AnthropicClaude Fable 590.7
- 🥈AnthropicClaude Fable 5.189.5
- 🥉OpenAIGPT-6 Astra89.4
- #4AnthropicClaude Opus 588.7
- #5OpenAIGPT-6.1 Sol88.6
- #6GoogleGemini 3.8 Flash87.8
- #7OpenAIGPT-5.6 Sol87.7
- #8OpenAIGPT-5.587.4
- #9Moonshot AIKimi K385.5
- #10AnthropicClaude Opus 5.585.5
- #11GoogleGemini 3.7 Flash85.5
- #12GoogleGemini 3.1 Pro85.4
- #13OpenAIGPT-6 Sol85.3
- #14GoogleGemini 3.5 Flash84.6
- #15GoogleGemini 3.6 Flash83.9
- #16SpaceXSIGrok 4.683.7
- #17AnthropicClaude Sonnet 5.583.4
- #18AnthropicClaude Opus 4.683.3
- #19OpenAIGPT-5.6 Terra82.9
- #20SpaceXSIGrok 4.582.8
- #21MetaMuse Spark 1.382.8
- #22OpenAIGPT-5.482.6
- #23AnthropicClaude Opus 4.581.3
- #24DeepSeekDeepSeek V4.1 Flash81.2
- #25SpaceXSIGrok 4.780.1
- #26Z.aiGLM 5.379.9
- #27AlibabaQwen3.7 Max79.7
- #28AnthropicClaude Opus 4.879.7
- #29MetaMuse Spark 1.278.6
- #30DeepSeekDeepSeek V4 Pro78.1
- #31AnthropicClaude Opus 4.777.9
- #31Moonshot AIKimi K2.7 Code77.9
- #33Z.aiGLM 5.3 Flash77.3
- #34MiniMaxMiniMax M376.8
- #35Z.aiGLM 5.276.2
- #36AnthropicClaude Sonnet 4.676.1
- #37Moonshot AIKimi K2.675.1
- #38AlibabaQwen3.6 Plus75.0
- #39AnthropicClaude Sonnet 575.0
- #40AlibabaQwen3.8 Flash74.6
- #41MetaMuse Spark 1.174.3
- #42OpenAIGPT-6 Luna73.8
- #43SpaceXSIGrok 4.373.6
- #44OpenAIGPT-5.6 Luna72.6
- #45SpaceXSIGrok Build 0.172.5
- #46GoogleGemini 3.5 Flash-Lite71.8
- #47OpenAIGPT-5.4 Mini71.0
- #48NVIDIANemotron 3 Ultra70.8
- #49DeepSeekDeepSeek V4 Flash70.1
- #50AnthropicClaude Haiku 5.563.5
- #51OpenAIGPT-5.4 Nano62.5
- #52Mistral AIMistral Large 449.6
모델 절반이 79.8 이하
이전 순위표 기준 점수
최신 순위표(2026.06.25)에 반영되지 않은 점수입니다. 출처에서 빠졌거나 아직 갱신되지 않은 모델로, 마지막으로 받은 점수를 참고로 보여 주며 순위는 매기지 않습니다.
- 2025.08.07$7.8180.7
- 2025.12.17$2.3878.7

- 2026.03.31$2.1977.7
- 2026.01.27$2.1477.7
- 2026.02.11$2.4077.5
- 2025.09.29$1276.0
- 2025.06.17$7.8175.5

- 2025.09.15$0.4274.3
- 2026.03.03$1.1973.2

- 2025.05.22$1272.9
- 2025.08.05$6072.8
- 2026.04.07$3.2871.8
- 2026.04.02$0.3471.3

- 2025.08.07$1.5669.2
- 2026.03.18$2.5069.1

- 2026.03.18$1.5066.8
- 2025.12.01$0.5364.2
- 2026.04.27$0.8963.1
- 2026.04.01$3.3062.3
- 2025.06.17$1.9562.3

- 2025.10.15$457.0
- 2026.02.12$0.9755.1
- 2025.09.25$0.3352.0

- 2025.11.19$0.4250.0
- 2025.08.05$0.4048.6
- 2025.08.07$0.3147.7
- 2026.04.01$0.6642.1
- 2026.03.09$2.1942.0
- 2026.03.11$0.3430.0
최근 60일 내 출시된 AI 64개 중 57개는 아직 이 지표에 반영되지 않았습니다 · Gemini 4 Neon, GPT-6.2 Astra, Microsoft-Decision-1.1 외 54개
사전에 정해진 방식으로 일괄 측정한 점수이므로, 실제 사용 환경의 결과와 다를 수 있습니다.
'제조사 발표' 표시가 있는 점수는 AI 개발사가 자체 발표한 수치로, 제3자 측정값이 아닙니다.