Automatisierte Seite. Automatisch von KI verfasst und übersetzt und per Software mit den Quellen abgeglichen; keine menschliche Redaktion. SI-IQ ist ein Index auf Basis öffentlicher Benchmark-Ergebnisse, kein IQ-Test. So funktioniert es

Wie intelligent ist Gemini 1.5 Pro (Sept 2024)?

80 SI-IQ · 90-%-Intervall 75–85
Nicht in der Rangliste: Ergebnisse aus weniger als 5 Benchmarks; Ergebnisse in weniger als 3 Bereichen; Ergebnisse von weniger als 2 Evaluatoren

Gemini 1.5 Pro (Sept 2024) ist ein Modell von Google DeepMind, veröffentlicht am 24.09.2024. Sein SI-IQ beträgt 80 (90-%-Intervall 75–85); die Schätzung stützt sich auf 3 Benchmark-Ergebnisse von 1 Evaluator.

Datenstand 18.10.2026 · Methode 1.0.0

Ein Modell wird in die Rangliste aufgenommen, wenn seine Ergebnisse aus mindestens 5 Benchmarks (die beiden Läufe von GPQA Diamond zählen als einer) in mindestens 3 Bereichen von mindestens 2 verschiedenen Evaluatoren stammen und die Veröffentlichungsdaten seiner Versionen höchstens 60 Tage auseinanderliegen. Dieses Modell erfüllt diese Bedingung noch nicht (Ergebnisse aus weniger als 5 Benchmarks; Ergebnisse in weniger als 3 Bereichen; Ergebnisse von weniger als 2 Evaluatoren). Seine vorläufige Schätzung stützt sich auf 3 Benchmark-Ergebnisse und kann sich stark ändern, wenn weitere Ergebnisse hinzukommen.

Fakten

Entwickler: Google DeepMind
Veröffentlicht: 24.09.2024
Zugang: API-Zugang
Verwendete Benchmarks: 3 Benchmark-Ergebnisse von 1 Evaluator

Fähigkeiten nach Bereich (SI-IQ, 90-%-Intervall)

Alle verwendeten Benchmark-Ergebnisse

Jeder Wert ist genau so angegeben, wie ihn die Quelle veröffentlicht hat: bei Epoch AI die beste ihrer Laufeinstellungen, bei OpenRouter der mediane Hosting-Anbieter (das eigene Hosting des Entwicklers, wenn dieses den Test durchgeführt hat). „Abgeleiteter SI-IQ“ ist die Fähigkeit, auf die dieses einzelne Ergebnis hindeutet; der Gesamt-SI-IQ ist ihr präzisionsgewichteter Durchschnitt.

Benchmark	Bereich	Punktzahl	Abgeleiteter SI-IQ	Evaluiert von	Wie von der Quelle aufgeführt	Abgerufen	Quelle
MATH Level 5	Mathematik	70,4 %	80	Epoch AI	`gemini-1.5-pro-002`	18.10.2026	Epoch AI Benchmarking Hub · Datendatei
OTIS Mock AIME 2024–2025	Mathematik	23,1 %	80	Epoch AI	`gemini-1.5-pro-002`	18.10.2026	Epoch AI Benchmarking Hub · Datendatei
GPQA Diamond	Wissen	57,2 %	81	Epoch AI	`gemini-1.5-pro-002`	18.10.2026	Epoch AI Benchmarking Hub · Datendatei

Menschliche Präferenz (Arena)

In der Arena-Rangliste, in der Nutzer zwischen zwei anonymen Antworten abstimmen, hat Gemini 1.5 Pro (Sept 2024) eine Bewertung von 1.351 (1.348–1.355) aus 55.606 Stimmen (veröffentlicht am 15.10.2026). Menschliche Präferenz ist ein anderes Maß als die Leistung in Benchmarks und fließt nicht in den SI-IQ ein. Arena (Hugging Face)

Berechnet mit der SI-IQ-Methodenversion 1.0.0. Die vollständige Methodik lesen

Datenquellen: Arena leaderboard dataset on Hugging Face (CC BY 4.0); Epoch AI, ‘Capabilities & benchmarking’ (CC BY 4.0) (Lizenzen und Änderungen).