FrontierMath Tiers 1-3(v2)
Epoch AI の非公開の研究レベル数学問題 Tier 1-3(v2)。
- 分類
- 数学
- 単位
- パーセント(%)
- 高いほど良い
- 比較グループ
- 1グループ
- 今選べるモデルの順位・順位を付けた結果 8 件
- すべてのモデル(記録): 1 グループ・42 件
ランキング
出典区分(公式・第三者・論文)と測定条件が違う値は比べられないため、比較グループ(同じ出典か、同じ条件と確認できた出典の集まり)ごとに分けて順位を付けています。
今 Claude Code / Codex で選べるモデル(旧モデルを除く)だけで順位を付けています。
第三者の結果(Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.0)
| 順位 | モデル | effort | スコア | 出典のコスト(指標) | 計測・報告 | 出典 |
|---|---|---|---|---|---|---|
| 1 | Claude Fable 5.2 | Max | 95.1% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Fable 5.2 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=claude-fable-5-2_max, Best score (across scorers)=0.9508771929824561, stderr=0.012824623769055387, Started at=2026-11-06T01:14:45.000Z |
| 2 | GPT-6.1 Sol | Max | 93.7% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-6.1 Sol (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=gpt-6.1-sol_max, Best score (across scorers)=0.9368421052631579, stderr=0.014434038295343787, Started at=2026-09-29T22:00:34.000Z |
| 2 | GPT-6 Astra | Max | 93.7% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-6 Astra (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=gpt-6-astra_max, Best score (across scorers)=0.9368421052631579, stderr=0.014434038295343787, Started at=2026-08-30T14:57:43.000Z |
| 4 | Claude Opus 5.5 | Max | 91.2% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Opus 5.5 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=claude-opus-5-5_max, Best score (across scorers)=0.9122807017543859, stderr=0.016786209858442095, Started at=2026-09-22T18:27:39.000Z |
| 5 | GPT-6.1 Terra | Max | 90.9% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-6.1 Terra (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=gpt-6.1-terra_max, Best score (across scorers)=0.9087719298245615, stderr=0.017085690144166794, Started at=2026-10-26T20:00:37.000Z |
| 6 | Claude Sonnet 5.5 | Max | 88.8% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Sonnet 5.5 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=claude-sonnet-5-5_max, Best score (across scorers)=0.887719298245614, stderr=0.018734030360524248, Started at=2026-09-29T15:15:14.000Z |
| 7 | GPT-6 Luna | Max | 79.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-6 Luna (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=gpt-6-luna_max, Best score (across scorers)=0.7894736842105263, stderr=0.024191503146153773, Started at=2026-09-22T22:14:05.000Z |
| 8 | Claude Haiku 5.5 | Max | 75.1% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Haiku 5.5 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=claude-haiku-5-5_max, Best score (across scorers)=0.7508771929824561, stderr=0.02566445410232946, Started at=2026-10-07T20:42:31.000Z |
すべてのモデルの順位(記録)
旧モデルと Claude Code / Codex で選べないモデルを含めて、比較グループごとに順位を付け直したものです。順位を付ける顔ぶれが違うので、上の順位とは違います。
旧モデル・選べないモデルを含む順位を開く(42 件)
第三者の結果(Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.0)
| 順位 | モデル | effort | スコア | 出典のコスト(指標) | 計測・報告 | 出典 |
|---|---|---|---|---|---|---|
| 1 | Claude Fable 5.2 | Max | 95.1% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Fable 5.2 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=claude-fable-5-2_max, Best score (across scorers)=0.9508771929824561, stderr=0.012824623769055387, Started at=2026-11-06T01:14:45.000Z |
| 2 | GPT-6.1 Sol | Max | 93.7% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-6.1 Sol (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=gpt-6.1-sol_max, Best score (across scorers)=0.9368421052631579, stderr=0.014434038295343787, Started at=2026-09-29T22:00:34.000Z |
| 2 | GPT-6 Astra | Max | 93.7% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-6 Astra (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=gpt-6-astra_max, Best score (across scorers)=0.9368421052631579, stderr=0.014434038295343787, Started at=2026-08-30T14:57:43.000Z |
| 4 | Claude Opus 5.5 | Max | 91.2% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Opus 5.5 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=claude-opus-5-5_max, Best score (across scorers)=0.9122807017543859, stderr=0.016786209858442095, Started at=2026-09-22T18:27:39.000Z |
| 5 | GPT-6.1 Terra | Max | 90.9% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-6.1 Terra (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=gpt-6.1-terra_max, Best score (across scorers)=0.9087719298245615, stderr=0.017085690144166794, Started at=2026-10-26T20:00:37.000Z |
| 6 | Gemini 4 Carbon | High | 90.5% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Gemini 4 Carbon (high)"。effort は Epoch の Model version 接尾辞 _high。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=gemini-4-carbon_high, Best score (across scorers)=0.9052631578947369, stderr=0.017377516319276178, Started at=2026-11-02T23:17:42.000Z |
| 7 | GPT-6 Sol | Max | 89.8% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-6 Sol (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=gpt-6-sol_max, Best score (across scorers)=0.8982456140350877, stderr=0.01793969072128637, Started at=2026-09-22T19:59:24.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 16 件目(ファイルの 29 行目)、id=RHjHEPHEsWZqFuMjBTeC6r、Model version=gpt-6-sol_max |
| 8 | GPT-5.6 Sol | Max | 89.1% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-5.6 Sol (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=gpt-5.6-sol_max, Best score (across scorers)=0.8912280701754386, stderr=0.018475392571140503, Started at=2026-07-09T02:45:09.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 92 件目(ファイルの 122 行目)、id=VBpT2WWYKBZtUxG9Z3svGh、Model version=gpt-5.6-sol_max |
| 9 | Claude Sonnet 5.5 | Max | 88.8% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Sonnet 5.5 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=claude-sonnet-5-5_max, Best score (across scorers)=0.887719298245614, stderr=0.018734030360524248, Started at=2026-09-29T15:15:14.000Z |
| 10 | Claude Fable 5 | Max | 87.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Fable 5 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=claude-fable-5_max, Best score (across scorers)=0.8701754385964913, stderr=0.019944477920133024, Started at=2026-06-09T18:12:35.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 125 件目(ファイルの 157 行目)、id=E28uZiJvrPgKtawbJpoZQ8、Model version=claude-fable-5_max |
| 11 | Gemini 4 Argon | High | 86.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Gemini 4 Argon (high)"。effort は Epoch の Model version 接尾辞 _high。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=gemini-4-argon_high, Best score (across scorers)=0.8596491228070176, stderr=0.020611471958164294, Started at=2026-10-13T17:14:57.000Z |
| 11 | GPT-5.6 Terra | Max | 86.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-5.6 Terra (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=gpt-5.6-terra_max, Best score (across scorers)=0.8596491228070176, stderr=0.020611471958164294, Started at=2026-07-09T15:58:30.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 90 件目(ファイルの 120 行目)、id=J6evjTMgHkrun8txnEvzdN、Model version=gpt-5.6-terra_max |
| 13 | GPT-5.5 | Xhigh | 85.3% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-5.5 (xhigh)"。effort は Epoch の Model version 接尾辞 _xhigh。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=gpt-5.5_xhigh, Best score (across scorers)=0.8526315789473684, stderr=0.021034091168852485, Started at=2026-06-11T17:47:36.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 114 件目(ファイルの 144 行目)、id=5FGXKvXQwGPtcCX2PNrLR5、Model version=gpt-5.5_xhigh |
| 14 | GPT-5.6 Luna | Max | 82.1% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-5.6 Luna (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=gpt-5.6-luna_max, Best score (across scorers)=0.8210526315789474, stderr=0.02274515950332741, Started at=2026-07-09T14:18:35.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 91 件目(ファイルの 121 行目)、id=YLAk5J3Wd8EruVXee8bAQb、Model version=gpt-5.6-luna_max |
| 15 | Claude Opus 4.8 | Max | 80.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Opus 4.8"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=claude-opus-4-8_max, Best score (across scorers)=0.8, stderr=0.023735633163877067, Started at=2026-06-10T15:25:15.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 124 件目(ファイルの 156 行目)、id=GVmgtgKMwEqc54f3jA7auP、Model version=claude-opus-4-8_max |
| 16 | GPT-6 Luna | Max | 79.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-6 Luna (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=gpt-6-luna_max, Best score (across scorers)=0.7894736842105263, stderr=0.024191503146153773, Started at=2026-09-22T22:14:05.000Z |
| 17 | Kimi K3.1 Pro | Max | 78.3% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Kimi K3.1 Pro (Together, max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。; Epoch は Together の推論 API 経由で実行(Model version kimi-k3.1-pro-together)出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=kimi-k3.1-pro-together_max, Best score (across scorers)=0.7824561403508772, stderr=0.024481850763866792, Started at=2026-11-06T00:59:23.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 2 件目(ファイルの 3 行目)、id=9iqojBnRuywLNkMDSVdwpJ、Model version=kimi-k3.1-pro-together_max |
| 18 | Claude Haiku 5.5 | Max | 75.1% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Haiku 5.5 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=claude-haiku-5-5_max, Best score (across scorers)=0.7508771929824561, stderr=0.02566445410232946, Started at=2026-10-07T20:42:31.000Z |
| 19 | Qwen3.8-Max | Xhigh | 74.7% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Qwen3.8 Max (xhigh)"。effort は Epoch の Model version 接尾辞 _xhigh。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=qwen3.8-max_xhigh, Best score (across scorers)=0.7473684210526316, stderr=0.0257841025556124, Started at=2026-08-04T19:32:51.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 82 件目(ファイルの 108 行目)、id=ABT89ieSWGnGj4RYMduHiG、Model version=qwen3.8-max_xhigh |
| 20 | Kimi K3 | Max | 72.2% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Kimi K3 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=kimi-k3_max, Best score (across scorers)=0.721830985915493, stderr=0.026636607935112643, Started at=2026-07-17T01:48:42.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 88 件目(ファイルの 116〜118 行目。複数行のレコード)、id=bcntamvGsSH6QgETdoaSph、Model version=kimi-k3_max |
| 21 | Gemini 3.7 Flash | High | 71.6% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Gemini 3.7 Flash (high)"。effort は Epoch の Model version 接尾辞 _high。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=gemini-3.7-flash_high, Best score (across scorers)=0.7157894736842105, stderr=0.026764156649364653, Started at=2026-08-14T19:59:58.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 78 件目(ファイルの 104 行目)、id=axMdgNDC8UYYLnZYLHZpF5、Model version=gemini-3.7-flash_high |
| 22 | DeepSeek-V4.1-Flash-1017 | Max | 71.2% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "DeepSeek V4.1 Flash 1017 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=deepseek-v4.1-flash-1017_max, Best score (across scorers)=0.712280701754386, stderr=0.02686277751301251, Started at=2026-10-19T22:39:00.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 5 件目(ファイルの 6 行目)、id=UnaMiD4Yy8W4WzyeSRwybr、Model version=deepseek-v4.1-flash-1017_max |
| 23 | Claude Opus 4.7 | Max | 70.2% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Opus 4.7 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=claude-opus-4-7_max, Best score (across scorers)=0.7017543859649122, stderr=0.027146911721220194, Started at=2026-06-10T21:41:54.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 120 件目(ファイルの 150 行目)、id=ZkNQ7GER7Mc9FSPmpUzgKH、Model version=claude-opus-4-7_max |
| 24 | GLM-5.3 | Max | 68.8% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GLM-5.3 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=glm-5.3_max, Best score (across scorers)=0.6877192982456141, stderr=0.027499133473298815, Started at=2026-08-25T14:20:20.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 76 件目(ファイルの 102 行目)、id=iXvqUzwxAiA3Rg3dwnutFs、Model version=glm-5.3_max |
| 25 | Gemini 3.8 Flash | High | 68.4% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Gemini 3.8 Flash (high)"。effort は Epoch の Model version 接尾辞 _high。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=gemini-3.8-flash_high, Best score (across scorers)=0.6842105263157895, stderr=0.027582557383453006, Started at=2026-09-02T17:15:36.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 21 件目(ファイルの 34 行目)、id=Utgs6DuaQDDdi98ZWH22qL、Model version=gemini-3.8-flash_high |
| 26 | DeepSeek-V4.1-Flash | 記載なし | 67.4% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "DeepSeek V4.1 Flash (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。; 出典の effort 表記「max」は公式の effort 一覧を取得できていないため effort なし出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=deepseek-v4.1-flash_max, Best score (across scorers)=0.6736842105263158, stderr=0.027821981570324446, Started at=2026-10-08T19:02:32.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 10 件目(ファイルの 22〜23 行目。複数行のレコード)、id=b6dXtaGSwvfRYADKYnj9Ci、Model version=deepseek-v4.1-flash_max |
| 27 | Grok 4.6 | Xhigh | 66.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Grok 4.6 (xhigh)"。effort は Epoch の Model version 接尾辞 _xhigh。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=grok-4.6_xhigh, Best score (across scorers)=0.6596491228070176, stderr=0.028116467881852295, Started at=2026-08-14T15:46:50.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 80 件目(ファイルの 106 行目)、id=Zb2AKwa942D7dBTTcebAba、Model version=grok-4.6_xhigh |
| 27 | Claude Opus 4.6 | Max | 66.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Opus 4.6 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=claude-opus-4-6_max, Best score (across scorers)=0.6596491228070176, stderr=0.028116467881852295, Started at=2026-06-11T00:19:44.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 119 件目(ファイルの 149 行目)、id=kgJ2d6XbKj3dZutDcBYSKU、Model version=claude-opus-4-6_max |
| 29 | DeepSeek-V4-Pro-0813 | Max | 64.6% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "DeepSeek V4 Pro 0813 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=deepseek-v4-pro-0813_max, Best score (across scorers)=0.6456140350877193, stderr=0.028383475205435625, Started at=2026-08-19T13:35:48.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 77 件目(ファイルの 103 行目)、id=b6yWmeFgsWeEiG9Qzs3NSf、Model version=deepseek-v4-pro-0813_max |
| 30 | Gemini 3.1 Pro Preview | 記載なし | 59.7% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Gemini 3.1 Pro Preview"。Model version に effort の接尾辞なし。データ取得 2026-11-12。; 出典に effort の記載が無いため effort なし出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=gemini-3.1-pro-preview, Best score (across scorers)=0.5964912280701754, stderr=0.02911181956525014, Started at=2026-06-11T23:35:57.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 110 件目(ファイルの 140 行目)、id=hVifTUdQZrFEYabgCRu8Qq、Model version=gemini-3.1-pro-preview |
| 31 | Gemini 3.6 Flash | High | 59.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Gemini 3.6 Flash"。effort は Epoch の Model version 接尾辞 _high。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=gemini-3.6-flash_high, Best score (across scorers)=0.5894736842105263, stderr=0.02919063494391404, Started at=2026-08-02T00:36:45.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 86 件目(ファイルの 114 行目)、id=nb9LnDeeQyvRCqsbsTANGD、Model version=gemini-3.6-flash_high |
| 32 | Mistral Large 4 | High | 58.6% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Mistral Large 4 Preview (high)"。effort は Epoch の Model version 接尾辞 _high。データ取得 2026-11-12。; Epoch の表記は Mistral Large 4 Preview(2026-10-06 版。2026-10-29 の Mistral Large 4 は別の Model version mistral-large-4-0-oss で、ここには入れていない)出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=mistral-large-4-0_high, Best score (across scorers)=0.5859649122807018, stderr=0.02922773823944577, Started at=2026-10-12T21:38:35.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 8 件目(ファイルの 9〜20 行目。複数行のレコード)、id=CAstp8hQG6Aehvtw85bMDX、Model version=mistral-large-4-0_high |
| 33 | GLM-5.3-Flash | Max | 55.8% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GLM-5.3-Flash (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=glm-5.3-flash_max, Best score (across scorers)=0.5578947368421052, stderr=0.029469977528223976, Started at=2026-08-27T13:29:52.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 75 件目(ファイルの 99〜101 行目。複数行のレコード)、id=YC2u9wykbYQg4gdkf76j26、Model version=glm-5.3-flash_max |
| 34 | Grok 4.7 | Xhigh | 53.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Grok 4.7 (xhigh)"。effort は Epoch の Model version 接尾辞 _xhigh。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=grok-4.7_xhigh, Best score (across scorers)=0.5298245614035088, stderr=0.029616712041900365, Started at=2026-09-22T21:49:22.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 15 件目(ファイルの 28 行目)、id=F4unBbW5M4VJogzCq4vGAb、Model version=grok-4.7_xhigh |
| 35 | Gemini 3 Flash Preview | 記載なし | 51.2% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Gemini 3 Flash Preview"。Model version に effort の接尾辞なし。データ取得 2026-11-12。; 出典に effort の記載が無いため effort なし出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=gemini-3-flash-preview, Best score (across scorers)=0.512280701754386, stderr=0.02966059084324674, Started at=2026-06-11T23:44:30.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 109 件目(ファイルの 139 行目)、id=EtgrDq6ei6kZe8K7QbXUe3、Model version=gemini-3-flash-preview |
| 36 | GPT-5.6 Luna | Low | 41.4% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-5.6 Luna (low)"。effort は Epoch の Model version 接尾辞 _low。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=gpt-5.6-luna_low, Best score (across scorers)=0.41403508771929826, stderr=0.029227738239445765, Started at=2026-08-29T11:07:20.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 35 件目(ファイルの 53 行目)、id=ZryXhNUpPedPvGhbqdNBEw、Model version=gpt-5.6-luna_low |
| 37 | GPT-5.6 Luna | None | 39.7% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-5.6 Luna (none)"。effort は Epoch の Model version 接尾辞 _none。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=gpt-5.6-luna_none, Best score (across scorers)=0.39649122807017545, stderr=0.029026817016410068, Started at=2026-08-29T11:07:39.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 33 件目(ファイルの 51 行目)、id=YwHKNFQjbat97wVLqachmi、Model version=gpt-5.6-luna_none |
| 38 | Gemini 3.1 Flash-Lite | High | 27.7% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Gemini 3.1 Flash-Lite"。effort は Epoch の Model version 接尾辞 _high。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=gemini-3.1-flash-lite_high, Best score (across scorers)=0.2771929824561403, stderr=0.026560920735701255, Started at=2026-08-30T22:34:53.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 24 件目(ファイルの 37 行目)、id=MVZf59jt9uEoWG9w5W9apB、Model version=gemini-3.1-flash-lite_high |
| 39 | Gemini 3.5 Flash-Lite | High | 26.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Gemini 3.5 Flash-Lite"。effort は Epoch の Model version 接尾辞 _high。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=gemini-3.5-flash-lite_high, Best score (across scorers)=0.2596491228070175, stderr=0.02601675082238553, Started at=2026-08-02T01:20:17.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 85 件目(ファイルの 113 行目)、id=8o2J9uQLKDCTiCFwYdkJRK、Model version=gemini-3.5-flash-lite_high |
| 40 | Gemini 2.5 Pro | 記載なし | 24.6% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "gemini-2.5-pro"。Model version に effort の接尾辞なし。データ取得 2026-11-12。; 出典に effort の記載が無いため effort なし出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=gemini-2.5-pro, Best score (across scorers)=0.24561403508771928, stderr=0.0255425481026507, Started at=2026-06-11T23:56:12.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 108 件目(ファイルの 138 行目)、id=FkywQ2KS4AkLPzjSPmhHcS、Model version=gemini-2.5-pro |
| 41 | Gemini 3.1 Flash-Lite | Low | 22.5% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Gemini 3.1 Flash-Lite"。effort は Epoch の Model version 接尾辞 _low。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=gemini-3.1-flash-lite_low, Best score (across scorers)=0.22456140350877193, stderr=0.024761793289496806, Started at=2026-08-30T22:35:03.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 23 件目(ファイルの 36 行目)、id=VcuyQvF8LWuYhQCx2FGDHh、Model version=gemini-3.1-flash-lite_low |
| 42 | Gemini 3.1 Flash-Lite | Minimal | 21.4% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, frontiermath_tiers_1_3_v2.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Gemini 3.1 Flash-Lite"。effort は Epoch の Model version 接尾辞 _minimal。データ取得 2026-11-12。出典の該当箇所frontiermath_tiers_1_3_v2.csv: Model version=gemini-3.1-flash-lite_minimal, Best score (across scorers)=0.21403508771929824, stderr=0.02433800055326239, Started at=2026-08-28T12:55:30.000Z所在 frontiermath_tiers_1_3_v2.csv のデータ行 43 件目(ファイルの 61 行目)、id=4gZy2dAAT2EPZDGz5puD3H、Model version=gemini-3.1-flash-lite_minimal |