Files
document-haness/docs/virtualization/tech-log-studio/cpu-virtualization/question/question-pinning-before-and-after.md
T

7.9 KiB

id, kind, slug, title, topic, topicName, project, status, questionStatus, lastVerifiedOn, studio, sourceRevision, evidence, source
id kind slug title topic topicName project status questionStatus lastVerifiedOn studio sourceRevision evidence source
62319064-17ef-4b2f-bf8b-e363cd0e36a6 QUESTION pinning-before-and-after CPU pinning 전후로 Keycloak 지연과 vCPU 스케줄링 변동이 달라지는가 cpu-virtualization CPU 가상화 virtualization 초안 RESOLVED 2026-09-21 https://hyeonworks.com/studio/documents/62319064-17ef-4b2f-bf8b-e363cd0e36a6/edit no-commit · 밖에서 반입한 문서 한 편. 고정할 저장소 리비전이 없다
../../../final/evidence/raw/2026-09-21-test-server-revalidation/100-cpu-pinning-baseline-host.txt
../../../final/evidence/raw/2026-09-21-test-server-revalidation/101-cpu-pinning-baseline-load.txt
../../../final/evidence/raw/2026-09-21-test-server-revalidation/102-cpu-pinning-apply.txt
../../../final/evidence/raw/2026-09-21-test-server-revalidation/103-cpu-pinning-pinned-host.txt
../../../final/evidence/raw/2026-09-21-test-server-revalidation/103-cpu-pinning-pinned-load.txt
../../../final/evidence/raw/2026-09-21-test-server-revalidation/104-cpu-pinning-restore.txt
../../../final/evidence/raw/2026-09-21-test-server-revalidation/105-cpu-pinning-unpinned-repeat-load.txt
../../../final/evidence/raw/2026-09-21-test-server-revalidation/106-cpu-pinning-pinned-repeat-load.txt
final/document.md#27-문제-영역에서-파생되는-추가-open-question-oq-10
final/document.md#24-cpu-가상화-계층에서-발생할-수-있는-문제-24-7
final/document.md#14-실제-linux에서-확인할-수-있는-것-14-7

CPU pinning 전후로 Keycloak 지연과 vCPU 스케줄링 변동이 달라지는가

2026-09-21 두 worker를 live pinning으로 kc-lab-1 vCPU0/1 → pCPU 0/1, kc-lab-2 vCPU0/1 → pCPU 2/3에 묶고 동일 OIDC read-only 부하를 전후로 비교했다. pinning 전에는 같은 vCPU TID의 PSR이 여러 pCPU 사이를 이동했지만 pinning 뒤에는 각각 0/1/2/3에 고정됐다. 그러나 Keycloak latency/throughput 개선은 반복 실행에서 재현되지 않았다.

pinning 전후 비교 결과

  • 2026-09-21 재검증에서 unpinned 상태의 worker vCPU affinity는 모두 0-7이었다. 15초 샘플에서 kc-lab-1 vCPU0 TID 272131은 pCPU 0,2,3,4,5,6,7에서, 다른 vCPU TID들도 여러 pCPU에서 관측됐다.

  • 2026-09-21 재검증에서 live pinning 뒤에는 272131→0, 272132→1, 272156→2, 272157→3으로 모든 샘플이 고정됐다. 즉 pinning이 scheduling migration을 실제로 제거한 것은 확인됐다.

  • 2026-09-21 재검증에서 첫 2000회/concurrency 20 비교는 unpinned 768.4 rps / avg 25.8 ms / p95 36.9 ms, pinned 616.0 rps / avg 32.2 ms / p95 46.3 ms로 pinned 쪽이 느렸다.

  • 2026-09-21 재검증에서 반복 비교는 unpinned 793.9 rps / avg 25.0 ms / p95 32.7 ms, pinned 781.7 rps / avg 25.4 ms / p95 33.6 ms로 거의 비슷했다. 첫 실행의 큰 차이가 반복되지 않았으므로 pinning이 지연을 개선하거나 악화한다고 일반화하지 않는다.

  • 2026-09-21 재검증에서 실험 종료 뒤 worker vCPU affinity를 모두 0-7로 복원했다.

  • CPU pinning 은 특정 vCPU 스레드를 특정 호스트 논리 CPU 에 제한하는 설정이다.

  • 적절히 쓰면 스케줄링 변동을 줄일 수 있고, 잘못 설정하면 특정 CPU 에 작업이 집중될 수 있다.

  • 그래서 pinning 을 걸었는지만 보지 않고 CPU 별 사용률과 친화도를 함께 확인한다.

  • 개념 문서가 잘못 건 예로 그린 것은 vCPU 스레드 둘과 호스트 프로세스 하나가 같은 논리 CPU 에 묶이고 나머지 논리 CPU 는 상대적으로 유휴한 그림이다. 치우침을 만드는 쪽에 호스트 프로세스가 함께 들어 있다.

  • 스레드가 최근 실행된 논리 CPU 는 ps -eLo pid,tid,psr,pcpu,comm | grep qemu 의 PSR 로 볼 수 있다.

  • PSR 값 하나가 vCPU 가 물리 CPU 에 영구 고정되어 있다는 뜻은 되지 않는다. pinning 을 걸지 않았다면 스케줄링에 따라 달라질 수 있다.

  • 이 호스트의 논리 코어는 8 이고(「측정 환경」), kc-lab-1 과 kc-lab-2 에 준 vCPU 는 각각 2 다(「실험대 전체 배치 (2026-09-03 구축 완료, 실측값)」). 실험대가 잡은 vCPU 는 2 + 2 + 1 = 5 다(「측정 환경」).

  • 2026-09-21 동일 OIDC read-only 부하를 pinning 전후로 두 차례 비교했다. migration 제거는 재현됐지만 latency/throughput 개선은 반복 재현되지 않았다.

A/B 비교 조건

  • baseline에서 두 worker의 vCPU affinity가 모두 0-7임을 먼저 확인했다.
  • 같은 TID의 PSR을 반복 샘플링해 unpinned 상태에서 실제 migration이 일어나는 것도 확인했다.
  • 두 실행에 같은 Keycloak 부하를 같은 방식으로 걸 수 있다고 전제한다.
  • 두 실행 사이에 vCPU 수와 가상 머신 배치를 바꾸지 않는다고 두고 짠다. 그래야 차이를 pinning 쪽으로 읽을 수 있다.

migration 제거와 성능 개선은 달랐다

pinning이 PSR migration을 줄이는지는 해소됐다. 이번 구성에서는 완전히 고정됐다. 반면 Keycloak latency/throughput 이점은 두 A/B 실행에서 일관되게 나타나지 않았다.

따라서 현재 남는 문제는 어느 pCPU 조합이 최적이냐가 아니라, 실제 workload에서 pinning을 유지할 운영상 근거가 있느냐다. 이번 측정만으로는 그 근거가 없다.

결과를 일반화하지 않는 이유

  • pinning 여부만으로 판정하지 않는다. 지연과 PSR 변동, CPU 별 사용률 셋을 같은 실행에서 받아 적는다.
  • 「전」과 「후」 두 실행의 부하가 같아야 지연 차이를 pinning 쪽으로 읽을 수 있다.
  • 이 실험에서 latency/throughput, PSR 변동, CPU affinity를 같은 전후 비교에 함께 기록했다.
  • 이 실행 전에 pinning 을 쓸지 말지를 먼저 정하지 않는다. 잰 값이 없는 상태로 정하면 그 선택이 감수하는 비용을 적을 수 없다.
  • 묶는 대상은 vCPU 스레드다. 게스트 안의 Keycloak 파드 배치는 이번 비교에서 바꾸지 않는다.

같은 부하를 pinning 전후로 반복했다

1. 같은 부하로 전후 두 실행을 재고 세 항목을 나란히 놓는다

pinning 없이 Keycloak 부하를 걸어 지연과 PSR 변동과 CPU 별 사용률을 남기고, vCPU 스레드를 논리 CPU 에 묶은 뒤 같은 부하로 같은 세 항목을 다시 남긴다. 지연이 좋아졌는지와 그 대가로 특정 CPU 에 몰렸는지를 한 실행 쌍에서 같이 볼 수 있다.

가상 머신 설정을 바꿔 다시 부하를 거는 만큼 시간이 든다. 두 실행 사이에 다른 조건이 바뀌면 그 실행 쌍은 버린다.

2. 부하 없이 PSR 변동만 견준다

유휴 구간에서 PSR 을 여러 번 찍어 pinning 전후를 견주는 방법이다. 부하를 만들지 않아도 되고 실행이 짧다.

이 방법으로는 질문의 절반만 답한다. pinning 이 스케줄링 변동을 줄이는지는 보이지만 Keycloak 지연이 달라지는지는 보이지 않고, 부하가 없으면 특정 CPU 에 작업이 몰리는지도 드러나지 않는다.

3. 지연만 견주고 CPU 별 사용률은 뒤로 미룬다 — 제외

전후 지연만 재면 실행 하나가 짧아진다. 다만 잘못 건 pinning 도 짧은 구간에서는 지연이 좋아진 것으로 보일 수 있다. 그 경우를 가려내려고 CPU 별 사용률과 친화도를 함께 보기로 했으므로 이 방법은 쓰지 않는다.

migration은 사라졌지만 지연 개선은 재현되지 않았다

pinning은 vCPU migration을 확실히 제거했지만 동일 Keycloak read-only 부하에서 latency/throughput 개선은 반복 재현되지 않았다. 따라서 현재 실험대에는 pinning을 기본 설정으로 적용하지 않고 unpinned 0-7 affinity를 유지한다. workload나 host CPU 배치가 바뀌면 같은 A/B 방식으로 다시 검증한다.