자동화된 페이지입니다. AI가 자동으로 작성하고 번역했으며 소프트웨어가 출처와 대조해 검증했습니다. 사람 편집자는 없습니다. SI-IQ는 공개 벤치마크 결과로 만든 지수이며 IQ 검사가 아닙니다. 작동 방식
Claude 3 Opus은(는) 얼마나 똑똑할까요?
Claude 3 Opus은(는) Anthropic의 모델이며 2024년 2월 29일에 출시되었습니다. SI-IQ는 65이며(90% 구간 60–70), 독립 평가 기관 1곳의 벤치마크 결과 5건으로 추정했습니다. 가장 강한 영역은 지식, 가장 약한 영역은 수학입니다.
이 모델은 독립 벤치마크 결과가 5건 미만이거나 평가 기관이 2곳 미만이므로, 표시는 되지만 순위는 매겨지지 않습니다.
정보
- 개발사
- Anthropic
- 출시일
- 2024년 2월 29일
- 이용 방식
- API 이용 가능
- 사용된 벤치마크
- 평가 기관 1곳의 결과 5건
영역별 능력(SI-IQ, 90% 구간)
사용한 모든 벤치마크 결과
각 점수는 출처가 게시한 값 그대로의 단일 값입니다. Epoch AI는 실행 설정 중 최고값, OpenRouter는 호스팅 제공업체의 중앙값(개발사가 직접 호스팅하여 테스트한 경우에는 해당 호스팅)입니다. “추정 SI-IQ”는 이 단일 결과가 가리키는 능력치이며, 전체 SI-IQ는 이들의 정밀도 가중 평균입니다.
| 벤치마크 | 점수 | 평가 기관 | 출처 |
|---|---|---|---|
| Chess Puzzles | 3.0% | Epoch AI | Epoch AI Benchmarking Hub · 데이터 파일 |
| MATH Level 5 | 37.5% | Epoch AI | Epoch AI Benchmarking Hub · 데이터 파일 |
| OTIS Mock AIME 2024–2025 | 4.7% | Epoch AI | Epoch AI Benchmarking Hub · 데이터 파일 |
| GPQA Diamond | 47.2% | Epoch AI | Epoch AI Benchmarking Hub · 데이터 파일 |
| SimpleQA Verified | 12.6% | Epoch AI | Epoch AI Benchmarking Hub · 데이터 파일 |
인간 선호도 (Arena)
사용자가 익명의 답변 두 개 중 하나에 투표하는 Arena 순위표에서 Claude 3 Opus은(는) 194,909표를 받아 1,322점(1,319–1,325)을 기록했습니다(게시일 2026년 10월 15일). 인간 선호도는 벤치마크 능력과는 다른 척도이며 SI-IQ에 포함되지 않습니다. Arena (Hugging Face)
SI-IQ 방법론 버전 1.0.0으로 계산했습니다. 전체 방법론 읽기
데이터 출처: Arena leaderboard dataset on Hugging Face (CC BY 4.0); Epoch AI, ‘Capabilities & benchmarking’ (CC BY 4.0).