12 KiB
id, kind, slug, title, topic, topicName, project, status, basisVersion, studio, assets, sourceRevision, source
| id | kind | slug | title | topic | topicName | project | status | basisVersion | studio | assets | sourceRevision | source | |||||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| e80853fa-98b8-4cc3-a2df-427c7147794b | CONCEPT | page-fault-layers-in-a-vm | VM 에서 page fault 는 세 계층에서 따로 일어난다 | memory-virtualization | 메모리 가상화 | virtualization | 초안 | x86-64 Intel EPT 기준의 second-stage translation · Linux Guest/Host kernel 의 page fault 처리 · AMD 는 NPT 계열로 대응 | https://hyeonworks.com/studio/documents/e80853fa-98b8-4cc3-a2df-427c7147794b/edit |
|
no-commit · 밖에서 반입한 문서 한 편. 고정할 저장소 리비전이 없다 |
|
VM 에서 page fault 는 세 계층에서 따로 일어난다
가상 머신 안에서 메모리 접근이 완료되지 못하면 그 사건을 받는 곳이 셋이다. GVA(Guest Virtual Address)를 GPA(Guest Physical Address)로 바꾸는 첫 단계에서 막히면 Guest Page Fault 가 나서 게스트 커널이 처리한다. 그 GPA 를 HPA(Host Physical Address)로 바꾸는 두 번째 단계에서 막히면 EPT Violation 이 나고, VM Exit 뒤 KVM 이 받는다. QEMU 도 호스트의 일반 프로세스여서 자기가 마련한 메모리에 대해 Host Page Fault 를 따로 겪는다. 이름이 모두 fault 라 한 덩어리로 읽히지만 일어나는 단계도 처리하는 쪽도 다르고, 셋 중 어느 것이 늘었는지에 따라 볼 지표가 갈린다.
TLB Miss 와 Page Fault 는 다른 사건이다
주소 변환 결과는 CPU 의 TLB(Translation Lookaside Buffer, 주소 변환 캐시)에 담긴다. 거기에 찾는 변환이 없으면 TLB Miss 가 나지만, 그것으로 접근이 실패하지는 않는다.
TLB에 translation cache가 없음
↓
Page Table을 조회
↓
정상 mapping 존재
↓
계속 실행
Page Fault 는 조건이 다르다. 페이지 테이블 상태로는 지금 접근을 정상으로 끝낼 수 없어서, 커널이 끼어들어 페이지를 마련하거나 매핑을 고쳐야 명령을 다시 시도할 수 있다. TLB Miss 는 테이블을 한 번 더 읽으면 풀리는데, 이쪽은 커널 처리를 부른다.
게스트 페이지 폴트
이 fault 는 GVA 를 GPA 로 바꾸는 첫 번째 변환 단계에서 일어난다.
GVA
↓
Guest Page Table
↓
현재 접근을 완료할 수 없음
↓
Guest #PF
↓
Guest Kernel Page Fault Handler
게스트 프로세스가 아직 물리 페이지가 붙지 않은 가상 메모리 영역에 처음 접근하면 이 사건이 난다. 게스트 안의 Keycloak 을 예로 들면, 새 영역의 첫 접근에서 fault 가 나고 게스트 커널이 페이지를 확보해 매핑을 갱신한 뒤 명령을 다시 시도한다.
Keycloak
↓
새 Virtual Memory 영역에 첫 접근
↓
Guest Page Table
↓
현재 usable physical mapping 없음
↓
Page Fault
↓
Guest Kernel
↓
Page 확보 / mapping 갱신
↓
Instruction 재시도
이 사건 자체가 프로그램 오류를 뜻하지는 않는다. 정상적인 메모리 관리에서도 늘 일어난다.
Guest Page Fault 를 부르는 다섯 가지
게스트 page fault의 대표적인 원인은 demand paging, copy-on-write, file-backed page 재읽기, swap-in, 잘못된 주소 접근으로 나눌 수 있다. 앞의 경우들은 커널이 페이지를 준비한 뒤 실행을 이어갈 수 있지만, 유효하지 않은 주소 접근은 프로세스에 신호가 전달될 수 있다.
| 원인 | 게스트 커널이 무엇을 하나 |
|---|---|
| Demand Paging | 아직 물리 페이지가 필요하지 않았던 영역에 첫 접근이 오면 페이지를 준비한다 |
| Swap-in | 필요한 페이지가 게스트 RAM 에 없으면 게스트 swap 에서 읽어 RAM 을 복원하고 페이지 테이블을 갱신한다 |
| Permission Fault | 읽기 전용 페이지에 쓰기가 들어오는 접근을 걸러 낸다 |
| Copy-on-Write | 쓰기에서 난 fault 를 의도적으로 이용해 페이지를 복제하고 쓰기 가능한 매핑을 새로 만든다 |
| Invalid Access | 정상 매핑으로 해결할 수 없는 접근이면 SIGSEGV 등으로 이어질 수 있다 |
권한이 fault 를 부르는 까닭은 페이지 테이블 엔트리가 매핑만 담고 있지 않기 때문이다. 같은 엔트리에 읽기·쓰기·실행 권한이 함께 들어 있다.
Physical Frame: 1234
Present: 1
Writable: 0
Executable: 0
이 엔트리로 매핑된 페이지에 쓰기가 들어가면 fault 가 날 수 있고, Copy-on-Write 는 그 성질을 거꾸로 이용해 쓰기가 들어온 순간에만 페이지를 복제한다. 다섯 가운데 Invalid Access 만 결과가 다르다. 게스트 커널이 정상적인 매핑으로 해결할 수 없는 접근이면 SIGSEGV 로 이어질 수 있고, 그래서 Page Fault 와 Segmentation Fault 는 같은 것이 아니다.
EPT Violation
이번에는 게스트 페이지 테이블 변환이 성공해 GPA 까지 얻었다고 하자. 그런데 그 GPA 에 대한 두 번째 단계 접근을 지금 EPT(Extended Page Tables) 조건으로 끝낼 수 없으면 EPT Violation 이 된다.
GVA
↓
Guest Page Table
↓
GPA ← Guest translation 성공
↓
EPT
↓
EPT Violation
↓
VM Exit
↓
KVM
게스트 안에서는 첫 단계가 정상으로 끝났으므로 게스트 커널의 fault 처리기가 이 사건을 보지 않는다. 제어권이 VM Exit 으로 VMX(Virtual Machine Extensions) Root 쪽으로 넘어가 KVM 이 처리한다.
두 사건이 갈리는 다섯 항목
| 무엇을 견주나 | Guest Page Fault | EPT Violation |
|---|---|---|
| 문제 위치 | GVA → GPA | GPA → HPA |
| 관련 테이블 | 게스트 페이지 테이블 | EPT |
| 기본 관점 | 게스트 가상 메모리 | 가상화 메모리 매핑 |
| 주요 처리 계층 | 게스트 커널 | VM Exit 후 KVM 쪽 |
| 앱 오류를 뜻하는가 | 반드시 아님 | 반드시 아님 |
Guest Page Fault 는 게스트가 자기 가상 메모리를 처리하는 사건이고, EPT Violation 은 두 번째 단계 가상화 변환에서 하이퍼바이저 처리가 필요한 사건이다. 마지막 줄이 둘 다 「반드시 아님」인 까닭은 앞에서 본 대로다. demand paging 이나 copy-on-write 처럼 정상 동작이 두 계층 모두에서 fault 를 만든다.
호스트 페이지 폴트
QEMU 도 호스트의 일반 사용자 공간 프로세스이므로 QEMU 가 마련한 메모리에는 호스트의 가상 메모리 관리가 그대로 적용된다. 게스트 RAM 을 담고 있는 그 영역도 호스트 페이지 테이블을 지나 호스트 물리 주소로 이어지고, 그 경로에서 demand allocation 이나 reclaim, swap 때문에 fault 가 날 수 있다.
QEMU / Guest RAM Backing
↓
Host Virtual Memory
↓
Host Page Fault
↓
Host Kernel
↓
필요한 Host page 처리
게스트 안에서는 이 사건이 fault 로 보이지 않는다. 게스트는 자기 메모리 접근이 오래 걸렸다고만 관측하고, 그 지연의 원인은 호스트 쪽 지표에 남는다. 그래서 가상 머신 메모리를 분석할 때는 Guest Page Fault 와 Host Page Fault, 그리고 EPT 관련 가상화 사건을 적어도 셋으로 갈라 놓는다.
그림에서 QEMU 쪽 갈래는 위의 두 갈래와 선으로 이어져 있지 않다. EPT로 얻은 HPA와 QEMU가 마련한 메모리의 호스트 물리 주소를 같은 값이라고 단정할 근거가 없어서 둘을 직접 연결하지 않았다.
메모리 지연이나 OOM(Out Of Memory) 이 보일 때 셋을 어디에 놓나
증상 하나로 "메모리 부족"을 결론내리지 않고 어느 계층의 사건인지부터 가른다. 세 사건은 이 분류에서 서로 다른 가지에 들어간다.
문제
│
├─ Guest Virtual Memory?
│ ├─ Page Fault
│ ├─ Guest reclaim
│ ├─ Guest swap
│ └─ Guest OOM
│
├─ Virtualization Translation?
│ ├─ EPT-related event
│ ├─ TLB pressure
│ └─ Huge-page/mapping 특성
│
└─ Host Memory?
├─ Host reclaim
├─ Host swap
├─ Host major fault
└─ Host OOM
원문의 분류에는 Dynamic Memory 와 NUMA(Non-Uniform Memory Access) 가지가 더 있고, 위에 옮긴 셋이 fault 가 걸리는 가지다. 게스트 쪽 fault 가 늘었으면 게스트의 reclaim 과 swap 을 같이 보고, 호스트 쪽 major fault 가 늘었으면 호스트의 reclaim 과 swap 을 같이 본다. 어느 쪽 지표를 먼저 여느냐가 이 구분에서 정해진다. 2026-09-21에는 게스트 쪽 fault와 호스트 쪽 fault를 별도 실험으로 확인했다. kc-lab-2에서 512MiB anonymous mapping을 page 단위로 처음 touch하자 minor fault가 page 수에 맞춰 증가했고, 같은 구간 major fault와 swap-in/out은 증가하지 않았다. 이어서 host memory pressure를 걸었을 때는 host pgmajfault가 478 증가했지만 zswap이 개입해 disk swap-out과 NVMe 지연 증가는 함께 나타나지 않았다.
이 실험대에서 확인한 fault와 남은 fault
2026-09-21 guest page fault는 직접 측정했다. kc-lab-2에서 anonymous 512MiB를 mmap()한 뒤 4KiB마다 처음 접근했을 때 process minor fault가 131,073 증가했고 major fault는 늘지 않았다. 같은 구간 guest 전체 pgfault는 131,180 증가했지만 pgmajfault, pswpin, pswpout은 증가하지 않았다. 이번 실행은 정상 demand paging으로 설명된다.
guest page fault가 늘어도 증가 자체를 오류로 읽지 않는다. 이번 demand-paging 실험처럼 minor fault만 크게 늘고 major fault와 swap이 그대로일 수 있다. 실제 workload에서는 아래 네 갈래를 같은 구간의 지표로 다시 구분한다.
정상 demand paging?
COW?
Guest swap-in?
application working-set 증가?
호스트 쪽은 2026-09-21 메모리 압박 실험에서 아래 네 값을 같은 시간축에 놓고 실제로 견줬다.
Host Fault
+
Swap activity
+
Storage latency
+
Guest application latency
가운데 가상화 변환 계층은 아직 측정 계획이 없다. 위 분류에는 EPT 관련 사건과 TLB 압박이 들어 있지만, 현재 준비된 확인 절차는 게스트와 호스트 두 계층에만 있다.
이 실험대의 커널은 7.2.2-arch1-1이다. guest demand-paging에서 minor fault가 증가하는 동작과, host pressure 구간에서 host major fault가 증가하는 동작은 각각 실제로 확인했다. 다만 둘은 서로 다른 실험이고 같은 fault로 합쳐 해석하지 않는다. 메모리 변환 계층의 EPT-related event를 page-fault 실험과 직접 연결하는 측정은 아직 하지 않았으므로, guest fault 결과를 가상화 translation까지 확장하지 않는다.