Automatisierte Seite. Automatisch von KI verfasst und übersetzt und per Software mit den Quellen abgeglichen; keine menschliche Redaktion. SI-IQ ist ein Index auf Basis öffentlicher Benchmark-Ergebnisse, kein IQ-Test. So funktioniert es

Wie intelligent ist Mistral Large 2 (Jul 2024)?

68 SI-IQ · 90-%-Intervall 63–73
Nicht in der Rangliste: Ergebnisse aus weniger als 5 Benchmarks; Ergebnisse in weniger als 3 Bereichen; Ergebnisse von weniger als 2 Evaluatoren

Mistral Large 2 (Jul 2024) ist ein Modell von Mistral AI, veröffentlicht am 24.07.2024. Sein SI-IQ beträgt 68 (90-%-Intervall 63–73); die Schätzung stützt sich auf 3 Benchmark-Ergebnisse von 1 Evaluator.

Datenstand 18.10.2026 · Methode 1.0.0

Ein Modell wird in die Rangliste aufgenommen, wenn seine Ergebnisse aus mindestens 5 Benchmarks (die beiden Läufe von GPQA Diamond zählen als einer) in mindestens 3 Bereichen von mindestens 2 verschiedenen Evaluatoren stammen und die Veröffentlichungsdaten seiner Versionen höchstens 60 Tage auseinanderliegen. Dieses Modell erfüllt diese Bedingung noch nicht (Ergebnisse aus weniger als 5 Benchmarks; Ergebnisse in weniger als 3 Bereichen; Ergebnisse von weniger als 2 Evaluatoren). Seine vorläufige Schätzung stützt sich auf 3 Benchmark-Ergebnisse und kann sich stark ändern, wenn weitere Ergebnisse hinzukommen.

Fakten

Entwickler
Mistral AI
Veröffentlicht
24.07.2024
Zugang
Offene Gewichte (nichtkommerzielle Lizenz)
Verwendete Benchmarks
3 Benchmark-Ergebnisse von 1 Evaluator

Fähigkeiten nach Bereich (SI-IQ, 90-%-Intervall)

6080100120140160Mathematik67

Alle verwendeten Benchmark-Ergebnisse

Jeder Wert ist genau so angegeben, wie ihn die Quelle veröffentlicht hat: bei Epoch AI die beste ihrer Laufeinstellungen, bei OpenRouter der mediane Hosting-Anbieter (das eigene Hosting des Entwicklers, wenn dieses den Test durchgeführt hat). „Abgeleiteter SI-IQ“ ist die Fähigkeit, auf die dieses einzelne Ergebnis hindeutet; der Gesamt-SI-IQ ist ihr präzisionsgewichteter Durchschnitt.

Benchmark Bereich Punktzahl Abgeleiteter SI-IQ Evaluiert von Wie von der Quelle aufgeführt Abgerufen Quelle
MATH Level 5 Mathematik 44,8 % 67 Epoch AI mistral-large-2407 18.10.2026 Epoch AI Benchmarking Hub · Datendatei
OTIS Mock AIME 2024–2025 Mathematik 8,5 % 68 Epoch AI mistral-large-2407 18.10.2026 Epoch AI Benchmarking Hub · Datendatei
GPQA Diamond Wissen 49,0 % 72 Epoch AI mistral-large-2407 18.10.2026 Epoch AI Benchmarking Hub · Datendatei

Menschliche Präferenz (Arena)

In der Arena-Rangliste, in der Nutzer zwischen zwei anonymen Antworten abstimmen, hat Mistral Large 2 (Jul 2024) eine Bewertung von 1.314 (1.311–1.318) aus 45.459 Stimmen (veröffentlicht am 15.10.2026). Menschliche Präferenz ist ein anderes Maß als die Leistung in Benchmarks und fließt nicht in den SI-IQ ein. Arena (Hugging Face)

Berechnet mit der SI-IQ-Methodenversion 1.0.0. Die vollständige Methodik lesen

Datenquellen: Arena leaderboard dataset on Hugging Face (CC BY 4.0); Epoch AI, ‘Capabilities & benchmarking’ (CC BY 4.0) (Lizenzen und Änderungen).