CWE-bench v1

脆弱性パッチ適用(programmatic pass@1、v1)。

分類
コーディング
単位
パーセント(%)
高いほど良い
比較グループ
1グループ
すべてのモデルの順位(記録)・順位を付けた結果 2 件

すべてのモデルの順位(記録)

旧モデルと Claude Code / Codex で選べないモデルを含めて、比較グループごとに順位を付け直したものです。順位を付ける顔ぶれが違うので、上の順位とは違います。

旧モデル・選べないモデルを含む順位を開く(2 件)

公式の結果(Gemini 4 Carbon (Google DeepMind models page, benchmark table))

順位モデルeffortスコア出典のコスト(指標)計測・報告出典
1Gemini 4 CarbonHigh71.0%—Collinear AI / Artificial AnalysisGemini 4 Carbon (Google DeepMind models page, benchmark table)2026-11-12 取得・ベンダー発表値。Google 公表表。methodology PDF: Gemini 4 Carbon/Argon は Gemini API の最高 thinking 設定・pass@1・単一試行。行ごとの出典は 公式リーダーボード(Collinear AI / Artificial Analysis 独立評価)programmatic pass@1
出典の該当箇所CWE-bench v1: Gemini 4 Carbon 71.0
2Gemini 4 ArgonHigh68.0%—Collinear AI / Artificial AnalysisGemini 4 Carbon (Google DeepMind models page, benchmark table)2026-11-12 取得・ベンダー発表値。Google 公表表。methodology PDF: Gemini 4 Carbon/Argon は Gemini API の最高 thinking 設定・pass@1・単一試行。行ごとの出典は 公式リーダーボード(Collinear AI / Artificial Analysis 独立評価)programmatic pass@1
出典の該当箇所CWE-bench v1: Gemini 4 Argon 68.0