Q1 대중들이 가장 선호하는 답변을 하는 AI는? Arena Text · 하위 24%84위 Q1 대중들이 가장 선호하는 답변을 하는 AI는? Arena Text · 하위 24%84위 Q2 여러 전문 분야의 지식을 폭넓게 갖췄을까? MMLU-Pro · 상위 18%5위 Q3 옛 판(v4) 기준 지능 지수는 어느 정도였을까? AA Intelligence Index v4 · 하위 24%59위
Q1 하위 24%84위 / 108 1426 Q2 87.3% Q3 20.6 Arena Text 알아보기 Arena Text 자세히 알아보기
Q1 고객 응대 업무를 규정에 맞게 처리할 수 있을까? TAU2 · 하위 30%57위 Q1 고객 응대 업무를 규정에 맞게 처리할 수 있을까? TAU2 · 하위 30%57위 Q2 사람이 몇 시간 걸리는 긴 일도 해낼 수 있을까? METR Time Horizon · 하위 30%8위
Q1 하위 30%57위 / 79 73.4% Q2 1시간 40분 TAU2 알아보기 TAU2 자세히 알아보기
Q1 긴 문서 여러 개에 흩어진 정보를 모아 답할 수 있을까? Long Context Reasoning · 하위 24%93위 Q1 긴 문서 여러 개에 흩어진 정보를 모아 답할 수 있을까? Long Context Reasoning · 하위 24%93위 Q2 대중들이 가장 선호하는 사업 관련 답변을 하는 AI는? Arena Business, Management & Finance · 하위 16%92위 Q3 긴 이야기를 읽고 행간의 뜻까지 이해할 수 있을까? Fiction.LiveBench · 상위 50%5위 Q4 공시 자료를 찾아 재무 분석을 할 수 있을까? Finance Agent v1 · 하위 47%9위
Q1 하위 24%93위 / 121 69.3% Q2 1409 Q3 61.1% Q4 43.6% Long Context Reasoning 알아보기 Long Context Reasoning 자세히 알아보기
Q1 여러 단계에 걸친 웹 조사를 해낼 수 있을까? Deep Research Bench · 하위 42%11위 Q1 여러 단계에 걸친 웹 조사를 해낼 수 있을까? Deep Research Bench · 하위 42%11위 Q2 대중들이 가장 선호하는 검색 답변을 하는 AI는? Arena Search · 하위 4%29위 Q3 요약할 때 없는 내용을 지어내지 않을까? Vectara Hallucination Rate · 하위 28%30위 Q1 하위 42%11위 / 17 46.8% 추론 강도: Budget 2K Q2 1127 Q3 12.0% Q4 88.0% Q5 60.6 Deep Research Bench 알아보기 Deep Research Bench 자세히 알아보기
Q1 코딩에 관한 답변 중에서 대중들이 가장 선호하는 AI는? Arena Coding · 하위 38%69위 Q1 코딩에 관한 답변 중에서 대중들이 가장 선호하는 AI는? Arena Coding · 하위 38%69위 Q2 까다로운 개발 일도 컴퓨터를 직접 다루며 혼자 풀어낼까? TerminalBench Hard · 하위 37%51위 Q3 터미널 작업과 과학 코드를 아우르는 코딩 지수는? AA Coding Index · 하위 23%78위 Q1 하위 38%69위 / 108 1498 Q2 31.1% Q3 34.0 Q4 63.6% Q5 39.8% Q6 70.7% Q7 43.7% Q8 6.9% Q9 72.0% Q10 1468 Q11 1.33× Arena Coding 알아보기 Arena Coding 자세히 알아보기
Q1 대중들이 가장 선호하는 글쓰기·문학 답변을 하는 AI는? Arena Writing, Literature & Language · 하위 41%65위 Q1 대중들이 가장 선호하는 글쓰기·문학 답변을 하는 AI는? Arena Writing, Literature & Language · 하위 41%65위 Q2 대화가 길어질 때 대중들이 가장 선호하는 AI는? Arena Multi-turn · 하위 30%77위 Q3 형식·길이 같은 까다로운 조건을 빠짐없이 지킬까? IFBench · 하위 21%65위 Q1 하위 41%65위 / 108 1432 Q2 1439 Q3 53.7% Q4 1433 Q5 1444 Q6 8.36 Q7 1422 Arena Writing, Literature & Language 알아보기 Arena Writing, Literature & Language 자세히 알아보기
Q1 여러 분야 전문가도 어려워하는 문제를 풀 수 있을까? Humanity's Last Exam · 하위 16%104위 Q1 여러 분야 전문가도 어려워하는 문제를 풀 수 있을까? Humanity's Last Exam · 하위 16%104위 Q2 연구 수준의 물리 문제를 풀 수 있을까? CritPt · 하위 12%78위 Q3 대중들이 가장 선호하는 수학 답변을 하는 AI는? Arena Math · 하위 20%85위 Q1 하위 16%104위 / 122 12.3% Q2 0.3% Q3 1421 Q4 79.6% Q5 64.4% Q6 73.3 Q7 73.3% Q8 1438 Q9 1426 Q10 98.2% Q11 85.0% Q12 4.5% Q13 4.2% Q14 35.7% Q15 8.6% Q16 58.8% Q17 5.6% Q18 81.6% Q19 37.4 강도별 None 6.2% Thinking 12.3%
Humanity's Last Exam 알아보기 Humanity's Last Exam 자세히 알아보기
Q1 대중들이 가장 선호하는 사진·도표 답변을 하는 AI는? Arena Vision · 하위 8%62위 Q1 대중들이 가장 선호하는 사진·도표 답변을 하는 AI는? Arena Vision · 하위 8%62위 Q2 그림만 보고 물체가 어떻게 움직일지 예측할까? VPCT · 하위 50%6위 Q3 사진 한 장으로 어디서 찍었는지 맞힐까? GeoBench · 하위 10%20위
Q1 하위 8%62위 / 66 1192 Q2 38.0% Q3 49.0% Arena Vision 알아보기 Arena Vision 자세히 알아보기
Q1 한국어로 물을 때 대중들이 가장 선호하는 AI는? Arena Korean · 하위 28%67위 Q1 한국어로 물을 때 대중들이 가장 선호하는 AI는? Arena Korean · 하위 28%67위 Q2 일본어로 물을 때 대중들이 가장 선호하는 AI는? Arena Japanese · 하위 27%66위 Q3 까다로운 질문에서 대중들이 가장 선호하는 AI는? Arena Hard Prompts · 하위 30%77위 Q1 하위 28%67위 / 91 1385 Q2 1387 Q3 1457 Q4 1450 Q5 1441 Q6 1433 Q7 38.0% Q8 88.0% Q9 73.6% Q10 79.6% Q11 67.6% Q12 87.0% Q13 84.2% Q14 94.2% Q15 78.9% Q16 86.0% Q17 84.0% Q18 66.7% Q19 35.0% Q20 13.0% Q21 79.0% Q22 87.9% Q23 96.0% Q24 72.0% Q25 73.0% Q26 95.0% Q27 71.0% Q28 78.0% Q29 88.8% Q30 73.0% Q31 6.0% Q32 25.1% Arena Korean 알아보기 Arena Korean 자세히 알아보기
Q 말도 안 되는 질문에 속지 않고 "이상하다"고 짚을까? BullshitBench v2 · 하위 41%86위
Q 말도 안 되는 질문에 속지 않고 "이상하다"고 짚을까? BullshitBench v2 · 하위 41%86위
하위 41%86위 / 143 34.0% BullshitBench v2 알아보기 BullshitBench v2 자세히 알아보기