公開ベンチマーク
IAM 権限昇格リスク検出がパスをどのように見つけて判定するかを、公開されている資料で誰でも同じ方法で再実行できるように測定した結果です。このページの表は、同じ入力に同じ結果が出ることを確認する回帰の基準でもあります。
1. 何を測定するか
パスごとに 2 つを見ます。
- 候補の検出 – パスパターンが、そのアカウントで危険な可能性のあるパスを見つけたか。ポリシーを適用する前に、権限の組み合わせだけで行う一次分類です。
- 判定 – 見つかったパスに、アカウントの実際のポリシー(ID ポリシー、アクセス許可の境界、SCP、条件)を AWS ポリシー評価ロジックの順序で適用し、パス判定の等級 4 種類のいずれかを付けた結果。
候補の検出は「疑わしいパスがあるか」、判定は「そのパスが今成立するか」です。2 つの表はこれを別々に示します。
2. 入力とフィクスチャの作り方
公開されている 2 つの資料を使います。
| 資料 | 内容 | 使い方 |
|---|---|---|
| pathfinding.cloud | AWS の権限昇格パスをまとめた公開一覧(92 パス) | パスごとに合成アカウントを 1 つ作ります。 |
| IAM Vulnerable | 意図的に脆弱にした IAM 環境(Terraform) | 権限昇格モジュール全体を1 つのアカウントとして読みます。31 パス。 |
2.1. パスごとに合成アカウントを 1 つ
pathfinding.cloud のパス 1 つにつき、架空のアカウントを 1 つ作ります。
- 必要な権限 – ユーザー 1 人に、パスが要求する権限(
permissions.required)をすべて許可するインラインポリシーを付けます。パスがリソース制約を記載していれば、その意味に合う ARN 1 つに、なければ*に許可します。 - 最小限の対象 – パスに必要な対象(渡すロール、対象ユーザー、管理者ポリシーなど)は、パスの分類に合わせて必要な分だけ作ります。それ以外のリソースはアカウントに置きません。
- アカウント ID は固定値を使います。
2.2. IAM Vulnerable は静的に読む
IAM Vulnerable の Terraform は実行せず、ファイルとして読むだけです。ユーザー・ロール・ポリシー・ポリシーのアタッチ・グループを 1 つのアカウントの IAM データに変換し、変数とアカウント ID の参照は固定値に置き換えます。この環境が文書で示す権限昇格パス 31 件が期待する一覧です。
2.3. ブロックの変形 3 種類
候補が検出されたパスごとに、同じアカウントにパスを止めるルールを 1 つ足した変形を作り、判定が本当に ブロック済み に変わるかを確認します。
| 変形 | 足すルール | 期待するブロック階層 |
|---|---|---|
| アカウントレベルの SCP 拒否 | アカウントに付いた SCP がパスの最初の必要アクションを拒否 | SCP |
| 境界にアクションなし | プリンシパルのアクセス許可の境界がそのアクションを許可しない | アクセス許可の境界 |
| ID の許可に MFA 条件 | ID ポリシーの許可に aws:MultiFactorAuthPresent が真であることを要求する条件を付ける(漏えいしたアクセスキーは MFA なしで呼び出すため止まる) | ID ポリシー |
3. 結果
3.1. 公開の権限昇格パス(パスごとに合成アカウント 1 つ)
候補の検出(パターン) 列は、パスパターンがどの程度一致したかです。完全一致はパターンの権限集合がパスの必要権限(参照専用アクションを除く)と等しい場合、部分一致はパターンの権限がその一部の場合、なしは該当するパターンがない場合です。右の 3 列は、変形ごとに ブロック済み になったパスの数です。
| 分類 | パス | 候補: 完全一致 / 部分一致 / なし | SCP 拒否でブロック済み | 境界変形でブロック済み | MFA 条件でブロック済み |
|---|---|---|---|---|---|
| new-passrole | 47 | 25 / 1 / 21 | 26/26 (100%) | 26/26 (100%) | 26/26 (100%) |
| existing-passrole | 23 | 16 / 0 / 7 | 16/16 (100%) | 16/16 (100%) | 16/16 (100%) |
| self-escalation | 8 | 8 / 0 / 0 | 8/8 (100%) | 8/8 (100%) | 8/8 (100%) |
| principal-access | 14 | 5 / 9 / 0 | 14/14 (100%) | 14/14 (100%) | 14/14 (100%) |
| 全体 | 92 | 54 / 10 / 28 | 64/64 (100%) | 64/64 (100%) | 64/64 (100%) |
3.2. 変更していないアカウントの判定等級
組織の状態 測定済み は組織を読み取り SCP が付いていない場合、未測定 は組織のガードレールポリシーを読めなかった場合です。
| 分類 | 組織 | 判定 | 判定(SCP未確認) | 候補 | ブロック済み | 検出なし |
|---|---|---|---|---|---|---|
| new-passrole | 測定済み | 0 | 0 | 26 | 0 | 21 |
| new-passrole | 未測定 | 0 | 0 | 26 | 0 | 21 |
| existing-passrole | 測定済み | 0 | 0 | 16 | 0 | 7 |
| existing-passrole | 未測定 | 0 | 0 | 16 | 0 | 7 |
| self-escalation | 測定済み | 8 | 0 | 0 | 0 | 0 |
| self-escalation | 未測定 | 0 | 8 | 0 | 0 | 0 |
| principal-access | 測定済み | 14 | 0 | 0 | 0 | 0 |
| principal-access | 未測定 | 0 | 14 | 0 | 0 | 0 |
| 全体 | 測定済み | 22 | 0 | 42 | 0 | 28 |
| 全体 | 未測定 | 0 | 22 | 42 | 0 | 28 |
3.3. IAM Vulnerable(アカウント 1 つ、README 表の権限昇格パス)
| パス | 候補を検出 | 判定 | 判定(SCP未確認) | 候補 | ブロック済み | 検出なし |
|---|---|---|---|---|---|---|
| 31 | 31 | 7 | 0 | 24 | 0 | 0 |
4. 結果の読み方
4.1. ブロック変形の 100% が意味すること
3 つの変形すべてで、候補が検出された 64 パスがすべて ブロック済み になり、判定は足したルールの階層(SCP、アクセス許可の境界、ID ポリシー)を止めた場所として示しました。つまり、アカウントに止めるルールがあれば、エンジンはそれを見逃して 判定 や 候補 のまま残すことはありません。危険なパスを安全と誤分類する方向の誤りがこの入力ではなかったことの確認であり、「安全」と言うときは必ず確定した拒否があるという等級のルールと一致します。
4.2. 変更していないアカウントで 候補 が多い理由
PassRole 系(new-passrole、existing-passrole)は、サービスがロールでコードを実行するステップを認可ルールで判断できないため、最大でも 候補 です。self-escalation と principal-access は、止めるルールがなければ 判定、組織の SCP を読めていなければ 判定(SCP未確認) です。組織の状態 測定済み と 未測定 の違いは、この 2 行にそのまま現れます。
4.3. 候補検出の限界
92 パスのうち 28 はパターンがなく検出されず、10 は部分一致です。この数字は判定エンジンではなく、パスパターン一覧の範囲を示します。IAM Vulnerable のロールを連続して引き受ける(AssumeRole の連鎖)パスはロール連鎖パターン(2〜3 ホップ)で検出され、ホップごとに信頼ポリシーと呼び出し元のポリシーを評価して判定します。
5. このベンチマークが主張しないこと
- 他のツールとの比較ではありません。 表はこの機能の入力と結果の対応だけを示します。他のツールより優れている、多く見つけるといった主張はしません。
- サービス実行のパスは候補のままです。 サービスがコードを実行するステップは認可ルールの外にあるため、
判定には上がりません。表の候補42 件はこのためです。 - ロール連鎖は最短の連鎖 1 本だけを判定します。 同じ管理者ロールに到達する他の連鎖は表示されず、3 ホップを超える連鎖は検出しません。
- 期待する等級は正解ラベルではありません。 保存された等級は、フィクスチャを作った時点でこの機能が返した結果を固定した回帰の基準です。正しさはブロック変形で確認します(止めるルールがあることは構成上わかっています)。
- 結果は合成アカウントと脆弱な環境のものであり、実際のお客様のアカウントのリスク水準を代表するものではありません。
6. 出典とライセンス
- pathfinding.cloud – github.com/DataDog/pathfinding.cloud、Apache License 2.0
- IAM Vulnerable – github.com/BishopFox/iam-vulnerable、MIT License
- 判定ルールの根拠 – AWS ポリシー評価ロジック
2 つの資料は読み取り専用のデータとしてのみ使用します。このページは両プロジェクトの公式文書でも、その保証でもありません。