Q1 여러 시험을 종합한 실력은 어느 정도일까? AA Intelligence Index · 하위 8%108위 Q1 여러 시험을 종합한 실력은 어느 정도일까? AA Intelligence Index · 하위 8%108위 Q2 대중들이 가장 선호하는 답변을 하는 AI는? Arena Text · 하위 12%87위 Q3 여러 전문 분야의 지식을 폭넓게 갖췄을까? MMLU-Pro · 하위 36%19위
Q1 하위 8%108위 / 116 10.4 추론 강도: Thinking Q2 1379 Q3 80.8% 강도별 None 9.30 Thinking 10.4
AA Intelligence Index 알아보기 AA Intelligence Index 자세히 알아보기
Q 고객 응대 업무를 규정에 맞게 처리할 수 있을까? TAU2 · 하위 6%76위
Q 고객 응대 업무를 규정에 맞게 처리할 수 있을까? TAU2 · 하위 6%76위
하위 6%76위 / 79 30.7% 추론 강도: Thinking 강도별 None 30.4% Thinking 30.7%
TAU2 알아보기 TAU2 자세히 알아보기
Q1 긴 문서 여러 개에 흩어진 정보를 모아 답할 수 있을까? Long Context Reasoning · 하위 18%96위 Q1 긴 문서 여러 개에 흩어진 정보를 모아 답할 수 있을까? Long Context Reasoning · 하위 18%96위 Q2 대중들이 가장 선호하는 사업 관련 답변을 하는 AI는? Arena Business, Management & Finance · 하위 12%87위 Q3 수백 쪽짜리 계약서를 읽고 필요한 내용을 정확히 찾아 답할 수 있을까? CorpFin v2 · 하위 10%58위 Q4 입원 기록을 읽고 진단 코드를 정확히 붙일 수 있을까? MedCode · 하위 16%62위
Q1 하위 18%96위 / 115 64.7% 추론 강도: Thinking Q2 1378 Q3 57.6% Q4 34.2% 강도별 None 49.7% Thinking 64.7%
Long Context Reasoning 알아보기 Long Context Reasoning 자세히 알아보기
Q1 대중들이 가장 선호하면서 틀린 말도 없는 답변을 하는 AI는? Arena Text Factuality · 하위 10%82위 Q1 대중들이 가장 선호하면서 틀린 말도 없는 답변을 하는 AI는? Arena Text Factuality · 하위 10%82위 Q2 요약할 때 없는 내용을 지어내지 않을까? Vectara Hallucination Rate · 상위 6%2위 Q3 요약할 때 없는 내용을 지어내지 않을까? Vectara Factual Consistency · 상위 6%2위
Q1 하위 10%82위 / 90 1407 Q2 3.3% Q3 96.7% Arena Text Factuality 알아보기 Arena Text Factuality 자세히 알아보기
Q1 대중들이 가장 선호하는 코딩 답변을 하는 AI는? Arena Coding · 하위 10%89위 Q1 대중들이 가장 선호하는 코딩 답변을 하는 AI는? Arena Coding · 하위 10%89위 Q2 까다로운 개발 일도 컴퓨터를 직접 다루며 혼자 풀어낼까? TerminalBench Hard · 하위 9%73위 Q3 코딩 종합 실력은 어느 정도일까? AA Coding Index · 하위 5%96위 Q1 하위 10%89위 / 97 1397 Q2 12.9% Q3 14.5 Q4 68.8% Q5 28.5% Q6 1399 Arena Coding 알아보기 Arena Coding 자세히 알아보기
Q1 대중들이 가장 선호하는 글쓰기·문학 답변을 하는 AI는? Arena Writing, Literature & Language · 하위 16%83위 Q1 대중들이 가장 선호하는 글쓰기·문학 답변을 하는 AI는? Arena Writing, Literature & Language · 하위 16%83위 Q2 대화가 길어질 때 대중들이 가장 선호하는 AI는? Arena Multi-turn · 하위 13%86위 Q3 형식·길이 같은 까다로운 조건을 빠짐없이 지킬까? IFBench · 하위 18%68위 Q1 하위 16%83위 / 97 1371 Q2 1374 Q3 52.6% Q4 1360 Q5 1364 Q6 75.8% Q7 1346 Arena Writing, Literature & Language 알아보기 Arena Writing, Literature & Language 자세히 알아보기
Q1 여러 분야 전문가도 어려워하는 문제를 풀 수 있을까? Humanity's Last Exam · 하위 8%108위 Q1 여러 분야 전문가도 어려워하는 문제를 풀 수 있을까? Humanity's Last Exam · 하위 8%108위 Q2 대중들이 가장 선호하는 수학 답변을 하는 AI는? Arena Math · 하위 9%87위 Q3 대학원 수준의 과학 문제를 풀 수 있을까? GPQA Diamond · 하위 11%93위 Q1 하위 8%108위 / 116 7.0% 추론 강도: Thinking Q2 1362 Q3 70.9% Q4 68.7 Q5 68.7% Q6 1402 Q7 1370 강도별 None 5.1% Thinking 7.0%
Humanity's Last Exam 알아보기 Humanity's Last Exam 자세히 알아보기
Q1 대중들이 가장 선호하는 사진·도표 답변을 하는 AI는? Arena Vision · 하위 13%52위 Q1 대중들이 가장 선호하는 사진·도표 답변을 하는 AI는? Arena Vision · 하위 13%52위 Q2 그림만 보고 물체가 어떻게 움직일지 예측할까? VPCT · 하위 10%10위 Q3 대학 수준의 그림·도표 문제를 풀 수 있을까? MMMU-Pro · 하위 3%37위
Q1 하위 13%52위 / 58 1198 Q2 30.0% Q3 51.0% Arena Vision 알아보기 Arena Vision 자세히 알아보기
Q1 한국어로 물을 때 대중들이 가장 선호하는 AI는? Arena Korean · 하위 18%66위 Q1 한국어로 물을 때 대중들이 가장 선호하는 AI는? Arena Korean · 하위 18%66위 Q2 일본어로 물을 때 대중들이 가장 선호하는 AI는? Arena Japanese · 하위 18%63위 Q3 까다로운 질문에서 대중들이 가장 선호하는 AI는? Arena Hard Prompts · 하위 12%87위 Q1 하위 18%66위 / 79 1348 Q2 1357 Q3 1390 Q4 1386 Q5 1399 Q6 1396 Q7 88.2% Q8 53.5% Q9 54.8% Q10 64.7% Q11 50.9% Arena Korean 알아보기 Arena Korean 자세히 알아보기