Automatisierte Seite. Automatisch von KI verfasst und übersetzt und per Software mit den Quellen abgeglichen; keine menschliche Redaktion. SI-IQ ist ein Index auf Basis öffentlicher Benchmark-Ergebnisse, kein IQ-Test. So funktioniert es

Wie intelligent ist Claude 3 Opus?

65 SI-IQ · 90-%-Intervall 60–70
Nicht in der Rangliste: zu wenige Daten

Claude 3 Opus ist ein Modell von Anthropic, veröffentlicht am 29.02.2024. Der SI-IQ beträgt 65 (90-%-Intervall 60–70), geschätzt aus 5 Benchmark-Ergebnissen von 1 unabhängigen Evaluatoren. Der stärkste Bereich ist Wissen, der schwächste Mathematik.

Dieses Modell hat weniger als 5 unabhängige Benchmark-Ergebnisse oder weniger als 2 verschiedene Evaluatoren und wird daher angezeigt, aber nicht in die Rangliste aufgenommen.

Fakten

Entwickler
Anthropic
Veröffentlicht
29.02.2024
Zugang
API-Zugang
Verwendete Benchmarks
5 Ergebnisse von 1 Evaluatoren

Fähigkeiten nach Bereich (SI-IQ, 90-%-Intervall)

6080100120140160Mathematik63Wissen71

Alle verwendeten Benchmark-Ergebnisse

Jeder Wert ist genau so angegeben, wie ihn die Quelle veröffentlicht hat: bei Epoch AI die beste ihrer Laufeinstellungen, bei OpenRouter der mediane Hosting-Anbieter (das eigene Hosting des Entwicklers, wenn dieses den Test durchgeführt hat). „Implizierter SI-IQ“ ist die Fähigkeit, auf die dieses einzelne Ergebnis hindeutet; der Gesamt-SI-IQ ist ihr präzisionsgewichteter Durchschnitt.

Benchmark Bereich Punktzahl Abgeleiteter SI-IQ Evaluiert von Wie von der Quelle aufgeführt Abgerufen Quelle
Chess Puzzles Schlussfolgern 3,0 % 61 Epoch AI claude-3-opus-20240229 18.10.2026 Epoch AI Benchmarking Hub · Datendatei
MATH Level 5 Mathematik 37,5 % 63 Epoch AI claude-3-opus-20240229 18.10.2026 Epoch AI Benchmarking Hub · Datendatei
OTIS Mock AIME 2024–2025 Mathematik 4,7 % 62 Epoch AI claude-3-opus-20240229 18.10.2026 Epoch AI Benchmarking Hub · Datendatei
GPQA Diamond Wissen 47,2 % 69 Epoch AI claude-3-opus-20240229 18.10.2026 Epoch AI Benchmarking Hub · Datendatei
SimpleQA Verified Wissen 12,6 % 83 Epoch AI claude-3-opus-20240229 18.10.2026 Epoch AI Benchmarking Hub · Datendatei

Menschliche Präferenz (Arena)

In der Arena-Rangliste, in der Nutzer zwischen zwei anonymen Antworten abstimmen, hat Claude 3 Opus eine Bewertung von 1.322 (1.319–1.325) aus 194.909 Stimmen (veröffentlicht am 15.10.2026). Menschliche Präferenz ist ein anderes Maß als die Leistung in Benchmarks und fließt nicht in den SI-IQ ein. Arena (Hugging Face)

Berechnet mit der SI-IQ-Methodenversion 1.0.0. Die vollständige Methodik lesen

Datenquellen: Arena leaderboard dataset on Hugging Face (CC BY 4.0); Epoch AI, ‘Capabilities & benchmarking’ (CC BY 4.0).