SecurityScorecard、AIのTPRM能力と耐攻撃性を測るベンチマークを公開
AIモデルのサードパーティリスク管理タスク遂行力と敵対的攻撃への耐性を評価し、L0〜L4の自律性レベルとA〜Fの防御評価を付与する。
SecurityScorecardは2026年11月6日、AIモデルのサードパーティリスク管理(TPRM)タスクの遂行能力と敵対的攻撃への耐性を評価する「AI TPRM Benchmark」を公開した。dailysecu.comが報じた。
同社はこれを、サプライチェーンセキュリティ業務の遂行能力とAIモデルの攻撃耐性を統合した世界初のベンチマークだと説明している。評価はタスク遂行能力とモデルのレジリエンスの2領域で構成される。
タスク遂行のテストには、セキュリティ露出リスクの分類、侵害インシデントの相関分析、ベンダーリスク集中度の分析、脆弱性対応の優先順位付け、修復計画が含まれる。レジリエンス評価ではプロンプトインジェクション、ジェイルブレイク攻撃、欺瞞的なベンダー資料がモデルの判断に与える影響を検証する。
評価スコアとオープンソース化
モデルにはL0からL4までの自律性準備レベルと、AからFまでの攻撃防御評価が付与される。設問と条件は定期的に変更され、回答データは保護されることで事前学習時の混入(コンタミネーション)を抑える仕組みだ。
ベンチマークのフレームワークはオープンソースとして公開された。AI研究ラボ、開発者、セキュリティ企業、企業のセキュリティチーム、研究者がモデルをテストし、結果を公開評価プラットフォームに提出できる。
よくある質問
AI TPRM Benchmarkとは何ですか?
AIモデルのサードパーティリスク管理タスクの遂行能力と、敵対的攻撃への耐性を評価するベンチマークです。SecurityScorecardが2026年11月6日に公開しました。
評価の指標は何ですか?
L0からL4までの自律性準備レベルと、AからFまでの攻撃防御評価が付与されます。
誰が利用できますか?
AI研究ラボ、開発者、セキュリティ企業、企業のセキュリティチーム、研究者がモデルをテストし、公開評価プラットフォームに結果を提出できます。