106 lines
7.5 KiB
Markdown
106 lines
7.5 KiB
Markdown
---
|
|
id: eba4a877-276a-4050-9a97-d32614546c71
|
|
kind: QUESTION
|
|
slug: vcpu-contention-under-two-vm-load
|
|
title: 가상 머신 두 대에 동시에 부하를 주면 이 호스트에서 vCPU 경쟁이 실제로 생기는가
|
|
topic: cpu-virtualization
|
|
topicName: CPU 가상화
|
|
project: virtualization
|
|
status: 초안
|
|
questionStatus: RESOLVED
|
|
lastVerifiedOn: 2026-09-21
|
|
studio: "https://hyeonworks.com/studio/documents/eba4a877-276a-4050-9a97-d32614546c71/edit"
|
|
sourceRevision: no-commit · 밖에서 반입한 문서 한 편. 고정할 저장소 리비전이 없다
|
|
evidence:
|
|
- ../../../final/evidence/raw/2026-09-21-test-server-revalidation/63-cpu-two-vm-baseline.txt
|
|
- ../../../final/evidence/raw/2026-09-21-test-server-revalidation/64-cpu-two-vm-load.txt
|
|
source:
|
|
- final/document.md#20-이-concept에서-파생되는-open-question-oq-1
|
|
- final/document.md#12-cpu-contention과-overcommit
|
|
- final/document.md#16-현재-keycloak-k3s-실험과의-관계
|
|
---
|
|
|
|
# 가상 머신 두 대에 동시에 부하를 주면 이 호스트에서 vCPU 경쟁이 실제로 생기는가
|
|
|
|
2026-09-21 `kc-lab-1`과 `kc-lab-2`의 2 vCPU를 각각 모두 CPU-bound로 만든 뒤 host와 두 guest를 동시에 관측했다. 부하 중 host run queue는 4~6으로 늘었지만 host는 약 49~50% idle이 남았고, 두 guest의 steal time은 계속 0%였다. 현재 8 logical CPU / worker 4 vCPU 구성에서는 이 부하로 host CPU 부족에 의한 vCPU contention이 관측되지 않았다.
|
|
|
|
## 두 worker를 동시에 태웠을 때
|
|
|
|
- 2026-09-21 재검증에서 baseline host는 대체로 `r=0~1`, `id=92~96%`였고 worker guest `%st`는 0% 중심이었다. 두 worker에 각각 `yes` 2개를 걸자 host는 `r=4~6`, `gu≈50%`, `id≈49~50%`가 됐다. worker 둘은 CPU `id=0%`까지 포화됐지만 `%st=0%`를 유지했다.
|
|
- 2026-09-21 재검증에서 부하 중 QEMU `CPU 0/KVM`, `CPU 1/KVM` thread는 baseline의 sleep 위주 상태에서 `Rl` 상태로 관측됐다. host에는 여전히 절반가량 idle CPU가 남았다.
|
|
|
|
「CPU contention과 overcommit」에서는 호스트에 논리 CPU 가 12개 있고 8 vCPU 짜리 가상 머신 넷을 올린 예를 드는데, 그러면 총 32 vCPU 가 12개의 논리 CPU 위에서 실행될 수 있다.
|
|
|
|
모든 가상 머신이 동시에 CPU를 많이 사용하면 vCPU 스레드끼리 호스트 CPU 시간을 두고 경쟁할 수 있다. 이때 게스트 안의 애플리케이션이 느려져도 원인이 애플리케이션 자체가 아니라 호스트 CPU 경쟁일 수 있다. 현재 실험 환경은 물리 호스트 한 대 아래에 가상 머신 두 대가 있고, 두 VM이 각각 K3s 노드와 Keycloak을 돌리는 구조다.
|
|
|
|
결과를 읽을 때는 애플리케이션과 인프라 계층을 섞지 않는다. 현재 lab에서 직접 겹쳐 볼 대상은 다음과 같다.
|
|
|
|
Keycloak refresh/session 동시성
|
|
PostgreSQL contention/locking
|
|
K3s resource scheduling
|
|
VM vCPU scheduling
|
|
Host CPU saturation
|
|
Edge Nginx / Traefik 경로
|
|
|
|
Redis를 사용하는 별도 패턴 실험이라면 Redis 상태 관리도 추가하지만, 현재 Keycloak lab 자체에는 Redis가 배포돼 있지 않다.
|
|
|
|
확인할 값은 다섯이다.
|
|
|
|
Host logical CPU 수
|
|
각 VM vCPU 수
|
|
QEMU vCPU thread CPU 사용량
|
|
Host run queue
|
|
Guest steal time
|
|
|
|
2026-09-21 재검증 기준 호스트 논리 CPU는 8개이고, 두 worker VM의 vCPU는 각각 2개다.
|
|
|
|
「CPU contention과 overcommit」의 12 와 8 과 32 는 경쟁이 어떻게 생기는지 설명하려고 든 예시 숫자이지 이 호스트에서 읽은 값이 아니다.
|
|
|
|
## 부하 조건
|
|
|
|
두 worker VM이 같은 물리 호스트의 CPU를 나눠 쓰는 구성은 2026-09-21 재검증에서 다시 확인했다.
|
|
|
|
실제 재검증에서는 두 worker에 동시에 CPU-bound 부하를 걸고 host와 guest 지표를 같은 구간에 기록했다.
|
|
|
|
게스트 Linux 의 top 이 이 환경에서 %st 를 실제로 채워 준다. %st 열이 보여 주는 steal time 은 게스트의 vCPU 에 실행할 작업이 있는데도 다른 작업 때문에 곧바로 실행되지 못한 상황을 가리킨다(「Steal Time」). 이 열이 비면 게스트 쪽에서는 경쟁의 단서를 못 본다.
|
|
|
|
현재 Nginx는 Edge VM 안에 있지만 host에는 QEMU 외에도 커널 networking·storage 작업과 SSH·관측 프로세스가 같은 물리 CPU를 쓴다. 따라서 부하 구간의 host CPU 사용량을 전부 QEMU vCPU 스레드 몫으로 읽지 않는다.
|
|
|
|
## 현재 구성에서 관측되지 않은 것
|
|
|
|
현재 구성과 이번 부하 수준의 contention 여부는 해소됐다. host는 8 logical CPU이고 두 worker의 vCPU 합은 4다. 동시 CPU-bound 구간에서도 guest steal은 0%였고 host idle이 약 절반 남았다.
|
|
|
|
더 높은 vCPU overcommit, host-side CPU load, pinning을 추가했을 때의 contention은 이번 질문의 현재 구성과 다른 조건이므로 별도 실험으로 남긴다.
|
|
|
|
## contention으로 판정하는 기준
|
|
|
|
2026-09-21 baseline과 두-worker CPU-bound 구간을 실제로 측정했다. 이 결론은 현재 8 logical CPU / worker 2+2 vCPU 구성과 20초 synthetic CPU load에 한정한다.
|
|
|
|
steal time 하나만 찍고 경쟁 여부를 판단하지 않는다. 호스트 CPU 사용량과 실행 대기열, QEMU vCPU 스레드 사용량을 같은 구간에서 함께 봐야 게스트의 `%st`가 왜 움직였는지 설명할 수 있다.
|
|
|
|
CPU 가상화 자체가 refresh token 경쟁의 원인은 아니다. 여기서 확인하려는 것은 refresh 실험 중 생긴 지연을 애플리케이션 동시성 문제로 읽어도 되는지, 아니면 호스트 CPU 경쟁을 먼저 의심해야 하는지다.
|
|
|
|
측정하는 동안 실험 환경 구성은 바꾸지 않는다. pinning 을 걸거나 vCPU 수를 줄이면 지금 구성에서 경쟁이 생기는지를 못 본다.
|
|
|
|
## 두 worker를 동시에 태우고 host와 guest를 같이 봤다
|
|
|
|
### 1. 호스트 논리 CPU 수와 각 가상 머신의 vCPU 수를 먼저 읽는다
|
|
|
|
호스트 논리 CPU 수와 각 VM의 vCPU 수는 부하 없이도 읽을 수 있다. 둘을 먼저 확인하면 vCPU 합이 논리 CPU 수를 넘는지 즉시 알 수 있다. 합이 더 작다면 적어도 ‘vCPU 총량이 논리 CPU 수를 넘는’ 형태의 초과 할당은 아니다. CPU 사용량과 실행 대기열, steal time은 그다음에 잰다.
|
|
|
|
### 2. 다섯 지표를 부하 전과 부하 중 두 시점에 찍는다
|
|
|
|
부하를 걸기 전에 한 번, 두 가상 머신에 동시에 부하를 건 뒤에 한 번, 같은 명령으로 기록한다. 호스트 쪽은 ps -eLo pid,tid,psr,pcpu,comm | grep qemu 로 QEMU vCPU 스레드를 보고, 게스트 쪽은 top 으로 %st 를 본다.
|
|
|
|
### 3. 가상 머신 한 대에만 먼저 부하를 걸어 본다
|
|
|
|
한 대에만 부하를 걸었을 때의 변화를 먼저 보면 두 대를 동시에 돌렸을 때 늘어난 값이 호스트 경쟁 때문인지 한 VM 내부의 CPU 포화 때문인지 비교하기 쉬워진다. 다만 최종 판정은 두 VM 동시 부하 결과로 한다.
|
|
|
|
### 4. 제외 — pinning 을 걸어 놓고 잰다
|
|
|
|
vCPU 스레드를 특정 논리 CPU 에 고정하면 경쟁 구간을 만들기 쉽다. 그러나 지금 구성에서 경쟁이 생기는지를 묻는 질문이라, 구성을 바꾸고 잰 값은 답이 되지 않는다. pinning 은 별도 질문으로 뺀다.
|
|
|
|
## 두 worker를 함께 태워도 host CPU는 남았다
|
|
|
|
현재 구성에서는 두 worker를 동시에 CPU-bound로 만들어도 host idle이 약 절반 남고 guest `%st`가 0%라 host CPU starvation 형태의 vCPU contention은 관측되지 않았다. `r`이 4~6으로 늘었다는 사실만으로 contention이라고 판정하지 않는다.
|