自動生成ページです。 AIが自動で作成・翻訳し、ソフトウェアが情報源と照合して確認しています。人間の編集者はいません。SI-IQは公開されているベンチマーク結果から作成した指数であり、IQテストではありません。 仕組み

SI-IQの基になるベンチマーク

SI-IQは現在、13件のベンチマークを指数に使用しています(追跡しているのは合計14件)。各ベンチマークは独立した評価機関が実施しており、開発元自身の主張が指数に使われることはありません。

ベンチマーク分野評価機関 モデル数負荷量 kインデックス内
Chess Puzzles 推論 Epoch AI 81 1.08 はい
Furniture Assembly 推論 Epoch AI 34 — 基準グループのモデルが3件未満
Mystery Game Puzzles 推論 Epoch AI 78 1.15 はい
FrontierMath Tier 4 数学 Epoch AI 68 2.32 はい
FrontierMath Tiers 1–3 数学 Epoch AI 86 1.50 はい
MATH Level 5 数学 Epoch AI 86 1.27 はい
OTIS Mock AIME 2024–2025 数学 Epoch AI 193 1.38 はい
Aider Polyglot コーディング Aider 40 1.06 はい
SWE-bench Verified (Epoch AIによる実行) コーディング Epoch AI 32 0.47 はい
GPQA Diamond 知識 Epoch AI 205 0.75 はい
GPQA Diamond (OpenRouterによる実行) 知識 OpenRouter 117 0.68 はい
SimpleQA Verified 知識 Epoch AI 81 0.63 はい
Berkeley Function Calling Leaderboard エージェント UC Berkeley (Gorilla) 41 0.47 はい
τ²-bench Airline (OpenRouterによる実行) エージェント OpenRouter 117 0.41 はい

負荷量kは、共通の能力尺度上で、そのベンチマークが強いモデルと弱いモデルをどれだけ明確に区別できるかを示します(値が高いほど情報量が多い)。 算出方法の詳細を読む

データソースとライセンス

出典ライセンス / 利用条件ダウンロードデータ内ステータス
Epoch AI Benchmarking HubCC BY 4.0はい前回の確認で失敗 · 2026年10月18日
OpenRouter benchmark datasetsCC BY 4.0はい前回の確認で失敗 · 2026年10月18日
Aider LLM LeaderboardsApache-2.0はい前回の確認で失敗 · 2026年10月18日
Berkeley Function Calling LeaderboardApache-2.0はい前回の確認で失敗 · 2026年10月18日
Arena (formerly LMArena) leaderboard datasetCC BY 4.0はい前回の確認で失敗 · 2026年10月18日
LiteLLM model price tableMITはい前回の確認で失敗 · 2026年10月18日