공개 벤치마크 (Benchmarks)
IAM 권한상승 위험 탐지가 경로를 어떻게 찾고 판정하는지, 공개된 자료로 누구나 같은 방법으로 다시 돌려 볼 수 있게 측정한 결과입니다. 이 페이지의 표는 같은 입력에 같은 결과가 나오는지 확인하는 회귀 기준이기도 합니다.
1. 무엇을 측정하나
경로마다 두 가지를 봅니다.
- 후보 탐지 – 경로 패턴이 그 계정에서 위험할 수 있는 경로를 찾아냈는가. 정책을 아직 적용하기 전, 권한 조합만 보고 내리는 1차 분류입니다.
- 판정 – 찾아낸 경로에 계정의 실제 정책(신원 정책, 권한 경계, SCP, 조건)을 AWS 정책 평가 로직 순서대로 적용해 경로 판정 등급 4종 중 하나를 붙인 결과.
후보 탐지는 "의심 경로가 있는가"이고, 판정은 "그 경로가 지금 성립하는가"입니다. 두 표는 이 둘을 따로 보여 줍니다.
2. 입력과 픽스처 만들기
두 개의 공개 자료를 사용합니다.
| 자료 | 내용 | 사용 방법 |
|---|---|---|
| pathfinding.cloud | AWS 권한상승 경로를 정리한 공개 목록 (92개 경로) | 경로마다 합성 계정 하나를 만듭니다. |
| IAM Vulnerable | 의도적으로 취약하게 만든 IAM 환경 (Terraform) | 권한상승 모듈 전체를 계정 하나로 읽습니다. 경로 31개. |
2.1. 경로마다 합성 계정 하나
pathfinding.cloud의 경로 하나당 가상의 계정 하나를 만듭니다.
- 필요 권한 – 사용자 한 명에게 경로가 요구하는 권한(
permissions.required)을 모두 허용하는 인라인 정책을 줍니다. 경로가 리소스 제약을 적어 두었으면 그 뜻에 맞는 ARN 하나에, 아니면*에 허용합니다. - 최소 대상 – 경로에 필요한 대상(넘겨받을 역할, 대상 사용자, 관리자 정책 등)은 경로 분류에 맞춰 필요한 만큼만 만듭니다. 그 밖의 자원은 계정에 두지 않습니다.
- 계정 ID는 고정 값을 씁니다.
2.2. IAM Vulnerable은 정적으로 읽기
IAM Vulnerable의 Terraform은 실행하지 않고 파일로만 읽습니다. 사용자·역할·정책·정책 연결·그룹 자원을 계정 하나의 IAM 데이터로 변환하고, 변수와 계정 ID 참조는 고정 값으로 바꿉니다. 이 환경이 문서로 밝힌 권한상승 경로 31개가 기대 목록입니다.
2.3. 차단 변형 3종
후보가 탐지된 경로마다 같은 계정에 경로를 막는 규칙 하나를 더한 변형을 만들어, 판정이 정말로 차단됨으로 바뀌는지 봅니다.
| 변형 | 더하는 규칙 | 기대하는 차단 계층 |
|---|---|---|
| 계정 수준 SCP 거부 | 계정에 붙은 SCP가 경로의 첫 번째 필요 액션을 거부 | SCP |
| 권한 경계에 액션 없음 | 주체의 권한 경계가 그 액션을 허용하지 않음 | 권한 경계 |
| 신원 허용에 MFA 조건 | 신원 정책의 허용에 aws:MultiFactorAuthPresent가 참이어야 한다는 조건을 붙임 (유출된 액세스 키는 MFA 없이 호출하므로 막힘) | 신원 정책 |
3. 결과
3.1. 공개 권한상승 경로 (경로마다 합성 계정 하나)
후보 탐지(패턴) 열은 경로 패턴이 찾은 정도입니다. 완전 일치는 패턴의 권한 집합이 경로의 필요 권한(조회 전용 액션 제외)과 같은 경우, 부분 일치는 패턴의 권한이 그 일부인 경우, 없음은 해당하는 패턴이 없는 경우입니다. 오른쪽 세 열은 변형별로 차단됨이 된 경로 수입니다.
| 분류 | 경로 | 후보: 완전 일치 / 부분 일치 / 없음 | SCP 거부 변형에서 차단됨 | 권한 경계 변형에서 차단됨 | MFA 조건 변형에서 차단됨 |
|---|---|---|---|---|---|
| new-passrole | 47 | 25 / 1 / 21 | 26/26 (100%) | 26/26 (100%) | 26/26 (100%) |
| existing-passrole | 23 | 16 / 0 / 7 | 16/16 (100%) | 16/16 (100%) | 16/16 (100%) |
| self-escalation | 8 | 8 / 0 / 0 | 8/8 (100%) | 8/8 (100%) | 8/8 (100%) |
| principal-access | 14 | 5 / 9 / 0 | 14/14 (100%) | 14/14 (100%) | 14/14 (100%) |
| 전체 | 92 | 54 / 10 / 28 | 64/64 (100%) | 64/64 (100%) | 64/64 (100%) |
3.2. 변경하지 않은 계정의 판정 등급
조직 상태 측정됨은 조직을 읽었고 붙은 SCP가 없는 경우, 미측정은 조직의 가드레일 정책을 읽지 못한 경우입니다.
| 분류 | 조직 | 판정 | 판정 (SCP 미확인) | 후보 | 차단됨 | 탐지 없음 |
|---|---|---|---|---|---|---|
| new-passrole | 측정됨 | 0 | 0 | 26 | 0 | 21 |
| new-passrole | 미측정 | 0 | 0 | 26 | 0 | 21 |
| existing-passrole | 측정됨 | 0 | 0 | 16 | 0 | 7 |
| existing-passrole | 미측정 | 0 | 0 | 16 | 0 | 7 |
| self-escalation | 측정됨 | 8 | 0 | 0 | 0 | 0 |
| self-escalation | 미측정 | 0 | 8 | 0 | 0 | 0 |
| principal-access | 측정됨 | 14 | 0 | 0 | 0 | 0 |
| principal-access | 미측정 | 0 | 14 | 0 | 0 | 0 |
| 전체 | 측정됨 | 22 | 0 | 42 | 0 | 28 |
| 전체 | 미측정 | 0 | 22 | 42 | 0 | 28 |
3.3. IAM Vulnerable (계정 하나, README 표의 권한상승 경로)
| 경로 | 후보 탐지 | 판정 | 판정 (SCP 미확인) | 후보 | 차단됨 | 탐지 없음 |
|---|---|---|---|---|---|---|
| 31 | 31 | 7 | 0 | 24 | 0 | 0 |
4. 결과 읽는 법
4.1. 차단 변형의 100%가 뜻하는 것
세 변형 모두에서 후보가 탐지된 64개 경로가 **전부 차단됨**이 되었고, 판정은 더해 둔 규칙의 계층(SCP, 권한 경계, 신원 정책)을 막은 곳으로 가리켰습니다. 이는 "계정에 막는 규칙이 있으면 엔진이 그것을 놓치고 판정이나 후보로 남기지 않는다"는 뜻입니다. 위험한 경로를 안전으로 잘못 분류하는 방향의 오류가 이 입력에서 없었다는 확인이며, 안전하다고 말할 때는 항상 확정된 거부가 있다는 등급 규칙과 일치합니다.
4.2. 변경하지 않은 계정에서 후보가 많은 이유
PassRole 계열(new-passrole, existing-passrole)은 서비스가 역할로 코드를 실행하는 단계를 인가 규칙으로 판단할 수 없어 최대 후보입니다. 자기 권한 상승(self-escalation)과 주체 접근(principal-access)은 막는 규칙이 없으면 판정이 되고, 조직 SCP를 읽지 못했으면 판정 (SCP 미확인)입니다. 조직 상태 측정됨과 미측정의 차이는 이 두 줄에 그대로 나타납니다.
4.3. 후보 탐지의 한계
경로 92개 중 28개는 패턴이 없어 탐지되지 않았고, 10개는 부분 일치입니다. 이 숫자는 판정 엔진이 아니라 경로 패턴 목록의 범위를 보여 줍니다. IAM Vulnerable의 역할을 연달아 맡는(AssumeRole 연쇄) 경로는 역할 연쇄 패턴(2~3홉)으로 탐지되며, 홉마다 신뢰 정책과 호출 주체의 정책을 평가해 판정합니다.
5. 이 벤치마크가 주장하지 않는 것
- 다른 도구와의 비교가 아닙니다. 표는 이 기능의 입력-결과 대응만 보여 줍니다. 다른 도구보다 낫다거나 더 많이 찾는다는 주장은 하지 않습니다.
- 서비스 실행 경로는 후보로 남습니다. 서비스가 코드를 실행하는 단계는 인가 규칙 밖이라
판정으로 올라가지 않습니다. 표의후보42개는 이 때문입니다. - 역할 연쇄는 가장 짧은 연쇄 하나만 판정합니다. 같은 관리자 역할에 닿는 다른 연쇄가 있어도 표시되지 않으며, 3홉을 넘는 연쇄는 탐지하지 않습니다.
- 기대 등급은 정답 라벨이 아닙니다. 저장된 등급은 픽스처를 만든 시점에 이 기능이 낸 결과를 고정해 둔 회귀 기준입니다. 정답은 차단 변형 쪽에서 확인합니다(변형은 막는 규칙이 있다는 사실이 구성상 알려져 있습니다).
- 합성 계정과 취약 환경의 결과이며, 실제 고객 계정의 위험 수준을 대표하지 않습니다.
6. 출처와 라이선스
- pathfinding.cloud – github.com/DataDog/pathfinding.cloud, Apache License 2.0
- IAM Vulnerable – github.com/BishopFox/iam-vulnerable, MIT License
- 판정 규칙의 근거 – AWS 정책 평가 로직
두 자료는 읽기 전용 데이터로만 사용하며, 이 페이지는 두 프로젝트의 공식 문서나 보증이 아닙니다.