Automatisierte Seite. Automatisch von KI verfasst und übersetzt und per Software mit den Quellen abgeglichen; keine menschliche Redaktion. SI-IQ ist ein Index auf Basis öffentlicher Benchmark-Ergebnisse, kein IQ-Test. So funktioniert es

Wie intelligent ist Gemini 1.5 Flash (Sep 2024)?

74 SI-IQ · 90-%-Intervall 70–79
Nicht in der Rangliste: zu wenige Daten

Gemini 1.5 Flash (Sep 2024) ist ein Modell von Google DeepMind, veröffentlicht am 24.09.2024. Sein SI-IQ beträgt 74 (90-%-Intervall 70–79); die Schätzung stützt sich auf 3 Benchmark-Ergebnisse von 1 Evaluator.

Datenstand 18.10.2026 · Methode 1.0.0

Ein Modell wird in die Rangliste aufgenommen, wenn seine Ergebnisse aus mindestens 5 Benchmarks (die beiden Läufe von GPQA Diamond zählen als einer) in mindestens 3 Bereichen von mindestens 2 verschiedenen Evaluatoren stammen und die Veröffentlichungsdaten seiner Versionen höchstens 60 Tage auseinanderliegen. Dieses Modell erfüllt diese Bedingung noch nicht und wird daher mit einer vorläufigen Schätzung angezeigt, aber nicht in die Rangliste aufgenommen.

Fakten

Entwickler
Google DeepMind
Veröffentlicht
24.09.2024
Zugang
API-Zugang
Verwendete Benchmarks
3 Benchmark-Ergebnisse von 1 Evaluator

Fähigkeiten nach Bereich (SI-IQ, 90-%-Intervall)

6080100120140160Mathematik75

Alle verwendeten Benchmark-Ergebnisse

Jeder Wert ist genau so angegeben, wie ihn die Quelle veröffentlicht hat: bei Epoch AI die beste ihrer Laufeinstellungen, bei OpenRouter der mediane Hosting-Anbieter (das eigene Hosting des Entwicklers, wenn dieses den Test durchgeführt hat). „Implizierter SI-IQ“ ist die Fähigkeit, auf die dieses einzelne Ergebnis hindeutet; der Gesamt-SI-IQ ist ihr präzisionsgewichteter Durchschnitt.

Benchmark Bereich Punktzahl Abgeleiteter SI-IQ Evaluiert von Wie von der Quelle aufgeführt Abgerufen Quelle
MATH Level 5 Mathematik 61,9 % 75 Epoch AI gemini-1.5-flash-002 18.10.2026 Epoch AI Benchmarking Hub · Datendatei
OTIS Mock AIME 2024–2025 Mathematik 16,2 % 76 Epoch AI gemini-1.5-flash-002 18.10.2026 Epoch AI Benchmarking Hub · Datendatei
GPQA Diamond Wissen 47,3 % 70 Epoch AI gemini-1.5-flash-002 18.10.2026 Epoch AI Benchmarking Hub · Datendatei

Menschliche Präferenz (Arena)

In der Arena-Rangliste, in der Nutzer zwischen zwei anonymen Antworten abstimmen, hat Gemini 1.5 Flash (Sep 2024) eine Bewertung von 1.309 (1.305–1.314) aus 34.902 Stimmen (veröffentlicht am 15.10.2026). Menschliche Präferenz ist ein anderes Maß als die Leistung in Benchmarks und fließt nicht in den SI-IQ ein. Arena (Hugging Face)

Berechnet mit der SI-IQ-Methodenversion 1.0.0. Die vollständige Methodik lesen

Datenquellen: Arena leaderboard dataset on Hugging Face (CC BY 4.0); Epoch AI, ‘Capabilities & benchmarking’ (CC BY 4.0) (Lizenzen und Änderungen).