自動生成ページです。AIが自動で作成・翻訳し、ソフトウェアが情報源と照合して確認しています。人間の編集者はいません。SI-IQは公開されているベンチマーク結果から作成した指数であり、IQテストではありません。 仕組み
τ²-bench Airline(OpenRouterによる実行):AIモデルの結果
τ²-bench Airline(OpenRouterによる実行)はOpenRouterが実施するエージェントのベンチマークです。当サイトのデータでは、117モデルに公表結果があります。
SI-IQ指数に含まれています(負荷量α = 0.41、偶然正答率 0%)。
- 評価機関
- OpenRouter
- ベンチマークのホームページ
- openrouter.ai/benchmarks/tau2-bench-airline
結果
| 1 | MiMo-V2.6 Pro Xiaomi Corp | 79.8% | 131117–144 | 2 結果のあるベンチマークが5件未満;結果のある分野が3つ未満;結果を出した評価機関が2つ未満 |
| 2 | Claude Fable 5 Anthropic | 79.6% | 138134–141 | 9 |
| 3 | Claude Fable 5.1 Anthropic | 79.1% | 140136–143 | 8 |
| 4 | DeepSeek-V4-Proオープン DeepSeek | 78.9% | 117113–120 | 10 |
| 5 | Gemini 4 Argon Google DeepMind | 78.7% | 140137–143 | 9 |
| 6 | Gemini 3.7 Flash Google DeepMind | 78.3% | 131128–134 | 9 |
| 7 | Qwen3.5 397B-A17Bオープン Alibaba | 78.1% | 114109–118 | 6 |
| 8 | GLM-5.3オープン Z.ai (Zhipu AI) | 78.1% | 125122–128 | 9 |
| 9 | Muse Spark Openオープン Meta AI | 78.0% | 127124–130 | 7 |
| 10 | Tencent Hy4 previewオープン Tencent | 77.8% | 129115–143 | 2 結果のあるベンチマークが5件未満;結果のある分野が3つ未満;結果を出した評価機関が2つ未満 |
| 11 | Claude Opus 4.8 Anthropic | 77.8% | 132129–135 | 9 |
| 12 | DeepSeek V4 Flash 0731オープン DeepSeek | 77.7% | 124121–127 | 9 |
| 13 | Claude Opus 4.7 Anthropic | 77.6% | 127124–130 | 10 |
| 14 | DeepSeek-V4-Flashオープン DeepSeek | 77.6% | 129116–143 | 2 結果のあるベンチマークが5件未満;結果のある分野が3つ未満;結果を出した評価機関が2つ未満 |
| 15 | Claude Sonnet 5.5 Anthropic | 77.5% | 140137–143 | 9 |
| 16 | Claude Opus 5 Anthropic | 77.3% | 136133–140 | 9 |
| 17 | Claude Opus 4.5 Anthropic | 77.0% | 115111–118 | 11 |
| 18 | DeepSeek V4 Pro 0813オープン DeepSeek | 76.8% | 128125–131 | 9 |
| 19 | Kimi K2.6オープン Moonshot | 76.7% | 121118–124 | 10 |
| 20 | Claude Opus 4.6 Anthropic | 76.4% | 123120–126 | 10 |
| 21 | Qwen3.6 27Bオープン Alibaba | 76.3% | 115110–119 | 6 |
| 22 | GLM-5.3-Flashオープン Z.ai (Zhipu AI) | 76.2% | 120117–124 | 8 |
| 23 | Claude Sonnet 5 Anthropic | 76.0% | 126123–129 | 9 |
| 24 | MiMo-V2.6 Flash Xiaomi Corp | 76.0% | 11299–125 | 2 結果のあるベンチマークが5件未満;結果のある分野が3つ未満;結果を出した評価機関が2つ未満 |
| 25 | Qwen 3.8 27Bオープン Alibaba | 75.9% | 120106–133 | 2 結果のあるベンチマークが5件未満;結果のある分野が3つ未満;結果を出した評価機関が2つ未満 |
| 26 | GPT-5.1 OpenAI | 75.8% | 120115–125 | 8 |
| 27 | Claude Haiku 5.5 Anthropic | 75.8% | 129126–132 | 9 |
| 28 | Gemma 4 31B ITオープン Google DeepMind | 75.7% | 10498–110 | 5 結果のあるベンチマークが5件未満 |
| 29 | Claude Opus 5.5 Anthropic | 75.6% | 144141–148 | 9 |
| 30 | Gemini 3 Flash Google DeepMind | 75.3% | 122119–125 | 10 |
| 31 | GPT-5.3 Codex OpenAI | 75.3% | 122108–136 | 2 結果のあるベンチマークが5件未満;結果のある分野が3つ未満 |
| 32 | Claude Sonnet 4.5 Anthropic | 75.3% | 110107–113 | 12 |
| 33 | GPT-5.5 OpenAI | 75.0% | 138135–141 | 10 |
| 34 | Claude Sonnet 4.6 Anthropic | 74.9% | 113108–118 | 8 |
| 35 | Grok 4.6 xAI | 74.8% | 126123–129 | 9 |
| 36 | Qwen3.5-122B-A10Bオープン Alibaba | 74.7% | 112103–121 | 3 結果のあるベンチマークが5件未満 |
| 37 | DeepSeek V4.1 Flashオープン DeepSeek | 74.5% | 128125–131 | 9 |
| 38 | Qwen 3.6 35B-A3Bオープン Alibaba | 74.5% | 111107–115 | 6 |
| 39 | MiMo-V2.5-Proオープン Xiaomi Corp | 74.4% | 121108–135 | 2 結果のあるベンチマークが5件未満;結果のある分野が3つ未満;結果を出した評価機関が2つ未満 |
| 40 | GLM-5.1オープン Z.ai (Zhipu AI) | 74.3% | 116112–120 | 8 |
| 41 | Gemini 3.1 Pro Google DeepMind | 74.2% | 127124–130 | 10 |
| 42 | GLM-5オープン Z.ai (Zhipu AI) | 74.2% | 112105–118 | 5 結果のあるベンチマークが5件未満 |
| 43 | MiniMax-M3オープン MiniMax | 73.9% | 108102–114 | 6 |
| 44 | Kimi K2.7 Codeオープン Moonshot | 73.8% | 118115–122 | 8 |
| 45 | MiMo-V2.5オープン Xiaomi Corp | 73.7% | 117104–131 | 2 結果のあるベンチマークが5件未満;結果のある分野が3つ未満;結果を出した評価機関が2つ未満 |
| 46 | Qwen3.5-35B-A3Bオープン Alibaba | 73.5% | 106100–112 | 4 結果のあるベンチマークが5件未満 |
| 47 | Gemini 3.5 Flash-Lite Google DeepMind | 73.5% | 109106–113 | 8 |
| 48 | Kimi K3オープン Moonshot | 73.5% | 127124–130 | 9 |
| 49 | Gemini 3.8 Flash Google DeepMind | 73.5% | 130127–133 | 9 |
| 50 | GLM-4.6オープン Z.ai (Zhipu AI), Tsinghua University | 73.4% | 117106–128 | 3 結果のあるベンチマークが5件未満;結果のある分野が3つ未満 |
| 51 | Gemini 3.5 Flash Google DeepMind | 73.3% | 126123–129 | 10 |
| 52 | GPT-5.6 Sol OpenAI | 73.3% | 140137–143 | 9 |
| 53 | GPT-5.4 OpenAI | 73.2% | 131128–133 | 10 |
| 54 | Kimi K2.5オープン Moonshot | 72.8% | 119112–125 | 6 |
| 55 | GPT-5.2 OpenAI | 72.7% | 125122–128 | 11 |
| 56 | Qwen3.7-Plus Alibaba | 72.7% | 115110–119 | 6 |
| 57 | GPT-5.6 Luna OpenAI | 72.3% | 130127–133 | 9 |
| 58 | MiniMax-M2.7オープン MiniMax | 72.0% | 120107–134 | 2 結果のあるベンチマークが5件未満;結果のある分野が3つ未満;結果を出した評価機関が2つ未満 |
| 59 | Gemini 3.6 Flash Google DeepMind | 72.0% | 125122–128 | 9 |
| 60 | Nemotron 3 Ultraオープン Nvidia | 72.0% | 114108–120 | 4 結果のあるベンチマークが5件未満 |
| 61 | Qwen3.7-Max Alibaba | 72.0% | 125122–128 | 10 |
| 62 | DeepSeek-V3.2オープン DeepSeek | 71.9% | 114101–127 | 2 結果のあるベンチマークが5件未満;結果のある分野が3つ未満;結果を出した評価機関が2つ未満 |
| 63 | GLM-5.2オープン Z.ai (Zhipu AI) | 71.7% | 121118–124 | 10 |
| 64 | GPT-5.6 Terra OpenAI | 71.5% | 134131–137 | 9 |
| 65 | GPT-5 mini OpenAI | 71.2% | 115112–118 | 12 |
| 66 | GPT-5 OpenAI | 70.7% | 121118–124 | 12 |
| 67 | GLM-4.7オープン Z.ai (Zhipu AI) | 70.4% | 112107–118 | 6 |
| 68 | GPT-6 Sol OpenAI | 70.2% | 140137–144 | 9 |
| 69 | Qwen3.8 Flash Alibaba | 70.0% | 125111–138 | 2 結果のあるベンチマークが5件未満;結果のある分野が3つ未満;結果を出した評価機関が2つ未満 |
| 70 | Kimi K2 Thinkingオープン Moonshot | 69.5% | 11299–126 | 2 結果のあるベンチマークが5件未満;結果のある分野が3つ未満;結果を出した評価機関が2つ未満 |
| 71 | DeepSeek-V3.2-Expオープン DeepSeek | 69.3% | 112103–121 | 4 結果のあるベンチマークが5件未満 |
| 72 | MiniMax-M2.5オープン MiniMax | 69.1% | 118105–132 | 2 結果のあるベンチマークが5件未満;結果のある分野が3つ未満;結果を出した評価機関が2つ未満 |
| 73 | glm-4.7-flash — | 68.3% | 9488–100 | 4 結果のあるベンチマークが5件未満 |
| 74 | GPT-6.1 Sol OpenAI | 68.2% | 148144–152 | 9 |
| 75 | GLM-4.5-Airオープン Z.ai (Zhipu AI), Tsinghua University | 68.0% | 11491–137 | 1 結果のあるベンチマークが5件未満;結果のある分野が3つ未満;結果を出した評価機関が2つ未満 |
| 76 | GPT-6 Luna OpenAI | 68.0% | 130127–133 | 9 |
| 77 | MiniMax-M2.1オープン MiniMax | 67.8% | 120106–133 | 2 結果のあるベンチマークが5件未満;結果のある分野が3つ未満;結果を出した評価機関が2つ未満 |
| 78 | GPT-6 Astra OpenAI | 67.7% | 150146–153 | 9 |
| 79 | Inklingオープン Thinking Machines | 67.6% | 114110–117 | 8 |
| 80 | Claude Haiku 4.5 Anthropic | 66.6% | 10499–108 | 8 |
| 81 | GPT-5.4 Nano OpenAI | 65.2% | 118115–121 | 9 |
| 82 | Qwen3.5-9Bオープン Alibaba | 65.0% | 10195–107 | 4 結果のあるベンチマークが5件未満 |
| 83 | Claude Sonnet 4 Anthropic | 64.0% | 9793–101 | 6 |
| 84 | Kimi K2 (Sep 2025)オープン Moonshot | 63.7% | 10592–118 | 2 結果のあるベンチマークが5件未満;結果のある分野が3つ未満;結果を出した評価機関が2つ未満 |
| 85 | gpt-oss-120bオープン OpenAI | 63.3% | 10699–112 | 6 |
| 86 | Qwen3-235B-A22B-Thinking (Jul 2025)オープン Alibaba | 62.7% | 111105–118 | 6 |
| 87 | GPT-5.4 Mini OpenAI | 62.2% | 117113–120 | 9 |
| 88 | Inkling-Smallオープン Thinking Machines | 60.8% | 118115–122 | 8 |
| 89 | qwen3-coder-next — | 57.6% | 10390–116 | 2 結果のあるベンチマークが5件未満;結果のある分野が3つ未満;結果を出した評価機関が2つ未満 |
| 90 | Gemma 4 26B A4Bオープン Google DeepMind | 57.3% | 106100–112 | 4 結果のあるベンチマークが5件未満 |
| 91 | Gemini 2.5 Pro (Jun 2025) Google DeepMind | 56.2% | 108104–112 | 8 |
| 92 | Gemini 2.5 Flash (Jun 2025) Google DeepMind | 55.1% | 10291–113 | 3 結果のあるベンチマークが5件未満;結果のある分野が3つ未満 |
| 93 | GPT-4.1 OpenAI | 50.8% | 9187–94 | 11 |
| 94 | DeepSeek-V3.1-Terminusオープン DeepSeek | 48.3% | 10289–115 | 2 結果のあるベンチマークが5件未満;結果のある分野が3つ未満;結果を出した評価機関が2つ未満 |
| 95 | Gemma 3 12Bオープン Google DeepMind | 48.0% | 7366–79 | 5 結果のあるベンチマークが5件未満 |
| 96 | DeepSeek-R1 (May 2025)オープン DeepSeek | 47.9% | 104100–109 | 5 結果のあるベンチマークが5件未満 |
| 97 | DeepSeek-V3.1オープン DeepSeek | 47.2% | 10087–113 | 2 結果のあるベンチマークが5件未満;結果のある分野が3つ未満;結果を出した評価機関が2つ未満 |
| 98 | gpt-oss-20bオープン OpenAI | 46.7% | 9589–101 | 4 結果のあるベンチマークが5件未満 |
| 99 | Qwen3-32Bオープン Alibaba | 45.2% | 9589–100 | 6 |
| 100 | GPT-5 nano OpenAI | 45.1% | 105102–109 | 11 |
| 101 | GPT-4.1 mini OpenAI | 44.3% | 9188–95 | 11 |
| 102 | GPT-4o (May 2024) OpenAI | 44.0% | 7066–75 | 5 結果のあるベンチマークが5件未満 |
| 103 | DeepSeek-V3 (Mar 2025)オープン DeepSeek | 43.4% | 8581–90 | 5 結果のあるベンチマークが5件未満 |
| 104 | Qwen3-Coder-480B-A35Bオープン Alibaba | 43.3% | 8572–98 | 2 結果のあるベンチマークが5件未満;結果のある分野が3つ未満;結果を出した評価機関が2つ未満 |
| 105 | Llama 4 Maverickオープン Meta AI | 43.1% | 8177–85 | 7 |
| 106 | GPT-4o (Aug 2024) OpenAI | 43.0% | 7368–77 | 9 |
| 107 | Qwen3-30B-A3Bオープン Alibaba | 42.3% | 9488–100 | 4 結果のあるベンチマークが5件未満 |
| 108 | Qwen3-14Bオープン Alibaba | 41.3% | 9387–99 | 5 結果のあるベンチマークが5件未満 |
| 109 | Mistral Small 4オープン Mistral AI | 41.1% | 9683–108 | 2 結果のあるベンチマークが5件未満;結果のある分野が3つ未満;結果を出した評価機関が2つ未満 |
| 110 | DeepSeek-V3オープン DeepSeek | 40.5% | 7773–82 | 5 結果のあるベンチマークが5件未満 |
| 111 | Qwen3-235B-A22B-Instruct (Jul 2025)オープン Alibaba | 39.6% | 9685–107 | 3 結果のあるベンチマークが5件未満;結果のある分野が3つ未満 |
| 112 | Qwen3-30B-A3B-Instruct (Jul 2025)オープン Alibaba | 37.0% | 9186–97 | 5 結果のあるベンチマークが5件未満 |
| 113 | Llama 3.3 70Bオープン Meta AI | 31.3% | 6661–71 | 6 |
| 114 | GPT-4o mini OpenAI | 28.0% | 6864–73 | 10 |
| 115 | Qwen2.5-72Bオープン Alibaba | 25.0% | 7268–77 | 5 結果のあるベンチマークが5件未満 |
| 116 | Qwen2.5-7Bオープン Alibaba | 16.7% | 5141–60 | 4 結果のあるベンチマークが5件未満 |
| 117 | GPT-4.1 nano OpenAI | 11.8% | 7672–80 | 9 |
データソース: Aider polyglot leaderboard data (Apache-2.0); Arena leaderboard dataset on Hugging Face (CC BY 4.0); Berkeley Function Calling Leaderboard, Gorilla project (Apache-2.0); Epoch AI, ‘Capabilities & benchmarking’ (CC BY 4.0); LiteLLM, model_prices_and_context_window.json (MIT); Source: OpenRouter (openrouter.ai), licensed under CC BY 4.0: reuse and republish with attribution to OpenRouter(ライセンスと変更点)。