11 KiB
id, kind, slug, title, topic, topicName, project, status, questionStatus, lastVerifiedOn, studio, sourceRevision, evidence, source
| id | kind | slug | title | topic | topicName | project | status | questionStatus | lastVerifiedOn | studio | sourceRevision | evidence | source | ||||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| a05fe2a6-eb7c-4bcc-a7da-58e729436468 | QUESTION | host-memory-pressure-vs-guest-latency | 호스트 메모리 압박이 게스트 애플리케이션 지연에 영향을 주는가 | memory-virtualization | 메모리 가상화 | virtualization | 초안 | RESOLVED | 2026-09-21 | https://hyeonworks.com/studio/documents/a05fe2a6-eb7c-4bcc-a7da-58e729436468/edit | no-commit · 밖에서 반입한 문서 한 편. 고정할 저장소 리비전이 없다 |
|
|
호스트 메모리 압박이 게스트 애플리케이션 지연에 영향을 주는가
2026-09-21 host에서 anonymous memory를 256 MiB씩 늘려 최대 3.5 GiB를 추가 할당했고 MemAvailable을 약 512 MiB까지 낮춘 뒤 12초 유지했다. 이 구간에서 host swap 사용량과 major fault는 증가했지만, zswap이 swap-out을 압축 메모리에서 흡수해 NVMe storage pressure로 크게 이어지지 않았고 OIDC discovery 지연도 baseline보다 악화되지 않았다. 현재 압박 수준에서는 host memory pressure와 함께 guest application latency가 증가하는 현상은 관측되지 않았다.
압박 전후 guest latency 결과
-
2026-09-21 pressure generator는 256 MiB step으로 총 3.5 GiB를 touch했고
MemAvailable은 약 3.9 GiB → 512 MiB까지 내려갔다. 프로세스에는oom_score_adj=1000을 적용해 OOM 시 실험 프로세스가 먼저 종료되도록 했다. -
2026-09-21 pressure 전후 host
pgmajfault는56493 → 56971로 478 증가했다. swap used도 약 68 MiB → 323 MiB로 늘었다. -
같은 실행에서 host는 zswap이 활성화돼 있었고 pressure 후
Zswapped≈256 MiB, 실제 compressedZswap≈32 MiB였다.pswpout은 증가하지 않았고 NVMe%util은 대부분 낮았으며 최고 약 7.1%였다. 즉 swap-used 증가는 곧바로 disk swap I/O를 뜻하지 않았다. -
OIDC latency median/p95는 baseline
11.45/21.88 ms, pressure10.49/16.23 ms, recovery11.17/17.09 ms였다. pressure 구간에서 일관된 latency 증가가 없었다. baseline에 200 ms outlier가 하나 있어 평균만 비교하지 않았다. -
pressure 해제 후
MemAvailable은 약 4.1 GiB로 회복했고 두 k3s node는Ready, edge OIDC도 HTTP 200이었다. -
「Host Memory Pressure와 Reclaim」에서는 호스트 RAM 수요가 실제로 쓸 수 있는 물리 메모리에 다다르면 Linux 가 메모리 reclaim 을 시도한다고 적었다. 회수 가능한 캐시와 페이지를 먼저 처리하고, 필요하면 anonymous memory 를 스왑으로 내리고, 그래도 부족하면 심각한 압박이나 OOM 으로 갈 수 있는 순서다.
-
「Host Memory Pressure와 Reclaim」에서는 file-backed clean page 와 anonymous page 를 갈라 적었다. clean file-backed page 는 원본이 스토리지에 있으므로 RAM 에서 버렸다가 필요할 때 다시 읽을 수 있다. 힙이나 스택 같은 anonymous memory 는 원본을 다시 읽을 수 없어서 스왑 같은 backing 이 필요할 수 있다.
-
「Host Swap이 VM에 미치는 영향」에서는 게스트 RAM backing 의 호스트 물리 페이지가 swap-out 될 수 있는 구성을 놓고 두 관점을 나란히 그렸다. 게스트 쪽에서는 Keycloak 이 메모리를 읽는 것으로 끝난다. 호스트 쪽에서는 필요한 backing page 가 RAM 에 없어 호스트 page fault, swap-in I/O, 물리 RAM 으로 복원, 게스트 실행 계속으로 바뀔 수 있다.
-
「Host Swap이 VM에 미치는 영향」에서는 그래서 게스트 관점의 RAM 접근이 호스트에서는 스토리지 I/O 를 기다리는 상황으로 바뀔 수 있다고 적었다.
-
「Memory Pressure와 Storage Contention의 연결」에서는 게스트와 호스트가 동시에 메모리 압박을 겪으면 게스트 스왑 I/O · 호스트 스왑 I/O · 데이터베이스 I/O · filesystem writeback 이 한 물리 NVMe 로 몰릴 수 있다고 그렸다. 이어지는 사슬은 호스트 메모리 압박에서 reclaim 과 스왑으로, 거기서 스토리지 I/O 증가와 스토리지 경합으로 간다. 그 다음이 데이터베이스 지연 증가와 애플리케이션 지연 증가다.
-
「Memory Pressure와 Storage Contention의 연결」에서는 CPU 사용률이 낮다고 해서 메모리나 스토리지 문제가 없는 것은 아니라고 밝혔다.
-
실험은 baseline → host memory pressure → reclaim/swap 관측 → guest latency 비교 → pressure 해제 후 회복 확인 순서로 진행한다. Baseline 게스트 애플리케이션 지연 측정 호스트 메모리 압박 유도 호스트 reclaim/swap 관측 게스트 지연 재측정
-
같은 구간의 CPU와 스토리지 지표도 함께 기록한다. 그래야 게스트 지연이 메모리 압박이 아니라 CPU나 스토리지 병목에서 온 것은 아닌지 가를 수 있다.
-
개념 문서는 호스트 메모리 압박을 어떤 방법으로 유도하는지 적지 않았다. 압박의 크기와 지속 시간도 적혀 있지 않다.
-
이 호스트에서 게스트 애플리케이션 지연을 잰 기록이 개념 문서에 없다.
memory pressure 조건
- 호스트에 메모리 압박을 만들었다가 되돌릴 수 있다고 본다. 되돌린 뒤 상태가 baseline 과 같아지는지는 세 번째 구간에서 확인한다.
- 게스트 애플리케이션 지연을 세 구간에서 같은 방법으로 잴 수 있다고 전제한다. 같은 요청 부하를 세 번 거는 것이 이 구성에서 가능한지는 해 보기 전에 알 수 없다.
- 2026-09-21에는
MemAvailable을 약 512 MiB까지 낮추자 host major fault와 swap occupancy가 증가하는 압박 구간은 만들 수 있었다. 다만 zswap을 넘어 지속적인 disk swap-out과 NVMe pressure가 나타나는 더 강한 임계점은 확인하지 않았다. - 세 구간 사이에 게스트 워크로드와 가상 머신 구성이 바뀌지 않는다고 두고 세 기록을 견준다.
- 호스트와 게스트의 시계가 맞아 네 종류 지표를 같은 시간축에 놓을 수 있다고 본다.
어떤 계층이 같이 움직였나
이번 controlled pressure 수준의 결과는 해소됐다. MemAvailable≈512 MiB까지 낮아지고 host major fault·swap occupancy는 증가했지만, zswap 때문에 disk swap-out이 크게 발생하지 않았고 NVMe latency/util과 guest OIDC latency도 같이 악화되지 않았다.
더 강한 pressure에서 zswap을 넘어 실제 disk swap I/O가 지속될 때 guest latency가 어떻게 변하는지는 안전 범위를 벗어나므로 이번 세션에서는 일반화하지 않는다. 운영 허용 임계점도 이 결과 하나로 정하지 않는다.
안전한 부하 범위
- 세 구간 모두에 「실험 시 반드시 같이 기록할 것」에서 요구한 호스트 · VM · 워크로드 조건을 남긴다. 조건을 남기지 않으면 이 결과를 다른 환경에 다시 쓸 수 없다.
- 게스트 쪽 스왑은 「지금 게스트와 호스트에서 swap 이 실제로 오가고 있는가」와 같은 방법으로 찍는다. 두 물음의 값이 같은 방식으로 남아야 나란히 놓을 수 있다.
- 압박을 유도한 상태로 운영 실험을 겹쳐 돌리지 않는다. 같은 스토리지를 쓰는 다른 실험이 있으면 시간을 나눈다.
- 지연이 올랐다는 관측만으로 원인을 호스트 메모리로 확정하지 않는다. 같은 구간의 CPU 와 스토리지 지표를 함께 놓고 「문제를 진단할 때의 분류」의 분류로 계층을 가른다.
- 여기서는 어느 정도의 압박을 운영에서 허용할지 정하지 않는다. 메모리 압박과 게스트 지연이 실제로 같은 구간에서 이어지는지만 확인한다.
- 이 실험을 순서에서 앞당기지 않는다. 「권장 실험 순서」의 권장 실험 순서에서 압박 실험은 열두 단계 가운데 열 번째다. 앞의 다섯 단계가 호스트와 가상 머신 조건을 채워 두므로, 먼저 돌리면 세 구간에 남길 조건을 그때 다시 모아야 한다.
어떻게 압박을 만들었나
1. 세 구간을 한 번에 돌리고 네 종류 지표를 같이 남긴다
baseline, 압박, 압박 해제 세 구간에서 게스트 지연·호스트 vmstat·스토리지 지연·CPU를 같은 시각에 기록한다. 세 구간을 한 표에 놓으면 게스트 지연이 reclaim/swap, storage, CPU 가운데 무엇과 함께 움직였는지 비교할 수 있다.
압박을 유도하는 방법을 먼저 정해야 하고, 게스트에 같은 부하를 세 번 거는 준비가 필요하다.
2. 압박 없이 baseline 만 먼저 여러 번 잰다
같은 워크로드로 게스트 지연을 몇 번 재서 평상시 변동 폭을 먼저 잡는다. 압박 구간의 지연 변화가 그 변동 폭 안인지 밖인지 가릴 기준이 생긴다.
단순 관측만으로는 답이 나오지 않는다. 실제 host memory pressure 구간이 있어야 baseline과 차이를 비교할 수 있다.
3. 호스트 swappiness 를 바꿔 가며 지연을 비교한다 — 제외
압박을 유도하는 대신 설정을 바꿔 스왑이 도는 정도를 조절하는 방법이다. 지금 필요한 답은 이 구성에서 경로가 이어지는지 하나인데, 설정을 바꾸면 baseline 과 압박 구간이 서로 다른 구성에서 나온 값이 된다. 설정을 어떻게 둘지는 경로가 이어진다는 것이 확인된 뒤의 결정이다.
이 압박 수준에서는 guest 지연이 늘지 않았다
2026-09-21 안전한 단계형 pressure 실험에서 host major fault와 zswap-backed swap occupancy는 증가했지만 guest OIDC latency 증가는 관측되지 않았다. 따라서 현재 압박 수준에서는 memory pressure가 guest latency까지 이어진 근거가 없다. 더 강한 pressure로 disk swap I/O를 의도적으로 유도하는 실험은 기존 서비스 영향이 커질 수 있어 별도 격리 환경에서 수행한다.