Automatisierte Seite. Automatisch von KI verfasst und übersetzt und per Software mit den Quellen abgeglichen; keine menschliche Redaktion. SI-IQ ist ein Index auf Basis öffentlicher Benchmark-Ergebnisse, kein IQ-Test. So funktioniert es

Wie intelligent ist Llama 3.2 1B?

42 SI-IQ · 90-%-Intervall 27–58
Nicht in der Rangliste: zu wenige Daten

Llama 3.2 1B ist ein Modell von Meta AI, veröffentlicht am 24.09.2024. Der SI-IQ beträgt 42 (90-%-Intervall 27–58), geschätzt aus 3 Benchmark-Ergebnissen von 2 unabhängigen Evaluatoren.

Dieses Modell hat weniger als 5 unabhängige Benchmark-Ergebnisse oder weniger als 2 verschiedene Evaluatoren und wird daher angezeigt, aber nicht in die Rangliste aufgenommen.

Fakten

Entwickler
Meta AI
Veröffentlicht
24.09.2024
Zugang
Offene Gewichte (eingeschränkte Lizenz)
Verwendete Benchmarks
3 Ergebnisse von 2 Evaluatoren

Fähigkeiten nach Bereich (SI-IQ, 90-%-Intervall)

Alle verwendeten Benchmark-Ergebnisse

Jeder Wert ist genau so angegeben, wie ihn die Quelle veröffentlicht hat: bei Epoch AI die beste ihrer Laufeinstellungen, bei OpenRouter der mediane Hosting-Anbieter (das eigene Hosting des Entwicklers, wenn dieses den Test durchgeführt hat). „Implizierter SI-IQ“ ist die Fähigkeit, auf die dieses einzelne Ergebnis hindeutet; der Gesamt-SI-IQ ist ihr präzisionsgewichteter Durchschnitt.

Benchmark Bereich Punktzahl Abgeleiteter SI-IQ Evaluiert von Wie von der Quelle aufgeführt Abgerufen Quelle
OTIS Mock AIME 2024–2025 Mathematik 0,6 % 47 Epoch AI Llama-3.2-1B-Instruct 18.10.2026 Epoch AI Benchmarking Hub · Datendatei
GPQA Diamond Wissen 23,9 % −33 Epoch AI Llama-3.2-1B-Instruct 18.10.2026 Epoch AI Benchmarking Hub · Datendatei
Berkeley Function Calling Leaderboard Agenten 10,8 % 31 UC Berkeley (Gorilla) Llama-3.2-1B-Instruct (FC) 18.10.2026 Berkeley Function Calling Leaderboard · Datendatei

Menschliche Präferenz (Arena)

In der Arena-Rangliste, in der Nutzer zwischen zwei anonymen Antworten abstimmen, hat Llama 3.2 1B eine Bewertung von 1.111 (1.103–1.119) aus 8.045 Stimmen (veröffentlicht am 15.10.2026). Menschliche Präferenz ist ein anderes Maß als die Leistung in Benchmarks und fließt nicht in den SI-IQ ein. Arena (Hugging Face)

Berechnet mit der SI-IQ-Methodenversion 1.0.0. Die vollständige Methodik lesen

Datenquellen: Arena leaderboard dataset on Hugging Face (CC BY 4.0); Berkeley Function Calling Leaderboard, Gorilla project (Apache-2.0); Epoch AI, ‘Capabilities & benchmarking’ (CC BY 4.0).