Automatisierte Seite. Automatisch von KI verfasst und übersetzt und per Software mit den Quellen abgeglichen; keine menschliche Redaktion. SI-IQ ist ein Index auf Basis öffentlicher Benchmark-Ergebnisse, kein IQ-Test. So funktioniert es

Wie intelligent ist Llama 3-8B?

40 SI-IQ · 90-%-Intervall 34–46
Nicht in der Rangliste: zu wenige Daten

Llama 3-8B ist ein Modell von Meta AI, veröffentlicht am 18.04.2024. Sein SI-IQ beträgt 40 (90-%-Intervall 34–46); die Schätzung stützt sich auf 3 Benchmark-Ergebnisse von 1 Evaluator.

Datenstand 18.10.2026 · Methode 1.0.0

Ein Modell wird in die Rangliste aufgenommen, wenn seine Ergebnisse aus mindestens 5 Benchmarks (die beiden Läufe von GPQA Diamond zählen als einer) in mindestens 3 Bereichen von mindestens 2 verschiedenen Evaluatoren stammen und die Veröffentlichungsdaten seiner Versionen höchstens 60 Tage auseinanderliegen. Dieses Modell erfüllt diese Bedingung noch nicht und wird daher mit einer vorläufigen Schätzung angezeigt, aber nicht in die Rangliste aufgenommen.

Fakten

Entwickler
Meta AI
Veröffentlicht
18.04.2024
Zugang
Offene Gewichte (eingeschränkte Lizenz)
Verwendete Benchmarks
3 Benchmark-Ergebnisse von 1 Evaluator

Fähigkeiten nach Bereich (SI-IQ, 90-%-Intervall)

6080100120140160Mathematik39

Alle verwendeten Benchmark-Ergebnisse

Jeder Wert ist genau so angegeben, wie ihn die Quelle veröffentlicht hat: bei Epoch AI die beste ihrer Laufeinstellungen, bei OpenRouter der mediane Hosting-Anbieter (das eigene Hosting des Entwicklers, wenn dieses den Test durchgeführt hat). „Implizierter SI-IQ“ ist die Fähigkeit, auf die dieses einzelne Ergebnis hindeutet; der Gesamt-SI-IQ ist ihr präzisionsgewichteter Durchschnitt.

Benchmark Bereich Punktzahl Abgeleiteter SI-IQ Evaluiert von Wie von der Quelle aufgeführt Abgerufen Quelle
MATH Level 5 Mathematik 6,1 % 37 Epoch AI Meta-Llama-3-8B-Instruct 18.10.2026 Epoch AI Benchmarking Hub · Datendatei
OTIS Mock AIME 2024–2025 Mathematik 1,9 % 54 Epoch AI Meta-Llama-3-8B-Instruct 18.10.2026 Epoch AI Benchmarking Hub · Datendatei
GPQA Diamond Wissen 26,1 % 5 Epoch AI Meta-Llama-3-8B-Instruct 18.10.2026 Epoch AI Benchmarking Hub · Datendatei

Berechnet mit der SI-IQ-Methodenversion 1.0.0. Die vollständige Methodik lesen

Datenquellen: Epoch AI, ‘Capabilities & benchmarking’ (CC BY 4.0) (Lizenzen und Änderungen).