127 lines
9.7 KiB
Markdown
127 lines
9.7 KiB
Markdown
---
|
|
id: da3a7b56-5691-4a9f-90c5-3a1a5d0f0013
|
|
kind: QUESTION
|
|
slug: virtualization-layer-saturation-during-refresh
|
|
title: Keycloak 동시 refresh 실험 중 CPU 가상화 계층이 결과를 흔들 만큼 포화되는가
|
|
topic: cpu-virtualization
|
|
topicName: CPU 가상화
|
|
project: virtualization
|
|
status: 초안
|
|
questionStatus: OPEN
|
|
lastVerifiedOn: 2026-09-21
|
|
studio: "https://hyeonworks.com/studio/documents/da3a7b56-5691-4a9f-90c5-3a1a5d0f0013/edit"
|
|
sourceRevision: no-commit · 밖에서 반입한 문서 한 편. 고정할 저장소 리비전이 없다
|
|
source:
|
|
- final/document.md#20-이-concept에서-파생되는-open-question-oq-2
|
|
- final/document.md#16-현재-keycloak-k3s-실험과의-관계
|
|
- final/document.md#26-현재-keycloak-실험에서-cpu-문제를-오판하지-않기-위한-기준
|
|
---
|
|
|
|
# Keycloak 동시 refresh 실험 중 CPU 가상화 계층이 결과를 흔들 만큼 포화되는가
|
|
|
|
동일 refresh token을 동시에 사용하는 경쟁 조건은 아직 실제로 검증하지 않았다. 2026-09-21 OIDC discovery synthetic load와 KVM/host CPU 지표는 함께 측정했지만, 질문이 요구하는 동일 refresh token 동시 요청 + Keycloak latency + PostgreSQL 지연 실험은 수행하지 않았다. 현재 Keycloak lab에는 Redis가 배포돼 있지 않으므로 이번 refresh 경쟁 실험의 측정 항목에도 Redis 지연을 포함하지 않는다. 별도 BFF/Redis 구성을 함께 재는 실험이라면 그때 Redis 지표를 추가한다. OIDC 부하 결과를 refresh 경쟁 실험의 대체 근거로 사용하지 않는다.
|
|
|
|
## 현재 실험대의 CPU 조건
|
|
|
|
초기 설계 문서는 refresh 경로를 `Client → Nginx/Load Balancer → K3s → Keycloak 두 노드 → Session/Token State → PostgreSQL·Redis`처럼 넓게 그렸다. **현재 Keycloak lab의 실제 저장소 구성은 PostgreSQL이고 Redis는 없다.** 따라서 이번 질문은 PostgreSQL까지의 현재 경로를 기준으로 하고, Redis가 들어가는 별도 BFF/session 구조에서는 그때 지표를 추가한다.
|
|
|
|
따라서 같은 지연이라도 원인은 한 계층에만 있지 않다. 현재 실험에서 분리해서 볼 대상은 다음 일곱 가지다.
|
|
|
|
Keycloak refresh/session 동시성
|
|
PostgreSQL contention/locking
|
|
Redis 상태 관리 — Redis를 포함한 별도 구조에서만
|
|
K3s resource scheduling
|
|
VM vCPU scheduling
|
|
Host CPU saturation
|
|
Nginx/LB
|
|
|
|
「현재 Keycloak/K3s 실험과의 관계」에서는 KVM CPU 가상화를 이해하는 목적을 이렇게 적었다.
|
|
|
|
Keycloak 멀티 노드 실험에서 발생한 지연이나 실패가 application/storage 문제인지, VM/Host 자원 문제인지 구분할 수 있도록 실험 기반을 이해하기 위해서다.
|
|
|
|
「현재 Keycloak 실험에서 CPU 문제를 오판하지 않기 위한 기준」에서는 같은 원인들을 여섯 경계로 다시 나눈다.
|
|
|
|
Application / Auth : Refresh Token 경쟁 · Session 상태 경쟁 · Keycloak 내부 처리
|
|
Storage : 현재 lab은 PostgreSQL lock / latency · Redis를 포함한 별도 구조에서는 Redis latency / consistency 추가
|
|
K3s : Pod CPU throttling · Pod scheduling/resource limit
|
|
Guest : Guest CPU saturation
|
|
Virtualization : vCPU scheduling · Steal time · VM Exit overhead
|
|
Host : CPU contention · CPU overcommit · Host saturation
|
|
|
|
첫 refresh 경쟁 실험은 CPU 자원을 여유 있게 유지한 상태에서 같은 세션과 같은 refresh token에 동시 요청을 보내는 조건으로 잡는다. 트래픽을 늘려 CPU·PostgreSQL·K3s 자원 포화를 보는 부하 실험은 이 실행과 분리한다. Redis가 있는 별도 구조를 시험할 때만 Redis 포화도 같은 방식으로 별도 측정한다.
|
|
|
|
「Steal Time」에서는 steal time 을 게스트 vCPU 에 실행할 작업이 있는데 다른 작업 때문에 즉시 실행되지 못하는 상황을 가리키는 단서로 적었다.
|
|
|
|
현재 Keycloak lab의 refresh 경쟁 실험과 같은 시간축에 놓을 값은 다섯이다.
|
|
|
|
Host CPU
|
|
Guest CPU
|
|
steal time
|
|
Keycloak latency
|
|
PostgreSQL latency
|
|
|
|
이 다섯 값을 함께 보는 이유는 refresh 동시성 문제와 호스트 자원 경쟁을 같은 지연으로 오해하지 않기 위해서다.
|
|
|
|
「측정 환경」에서는 2026-09-10 에 이 호스트에서 논리 코어 8 과 Mem: 11648 을 받아 적었고, 실험대가 잡은 vCPU 를 2 + 2 + 1 = 5 로 적었다. 실험 구간의 값은 아직 없다.
|
|
|
|
## refresh 실험에서 같이 볼 조건
|
|
|
|
refresh 경쟁 실험이 Keycloak latency와 PostgreSQL latency를 함께 기록한다고 전제한다. 다만 원문에는 그 실험이 어떤 값을 어떤 주기로 기록하는지는 적혀 있지 않다.
|
|
|
|
기준값을 찍는 구간과 실험 구간 사이에 호스트의 다른 작업이 달라지지 않는다.
|
|
「이 부의 출처와 범위」에서는 2026-09-03 과 2026-09-10 사이에 호스트 RAM 이 물리 증설되고 게스트가 두 대에서 세 대로 늘었다고 적으면서, 두 값이 어긋나 보이면 「틀린 것이 아니라 다른 날이다」라고 못 박았다. 기준값과 실험 구간은 같은 날 같은 구성에서 받아야 이 전제가 선다.
|
|
|
|
다섯 지표의 시각을 맞춰 읽을 수 있다고 전제한다. 호스트 쪽과 게스트 쪽 시계가 어긋나면 부하 구간을 겹쳐 놓을 수 없기 때문이다.
|
|
|
|
「현재 Keycloak 실험에서 CPU 문제를 오판하지 않기 위한 기준」에서 말한 「CPU 자원을 여유 있게 유지한」 상태를 이 호스트에서 만들 수 있다.
|
|
|
|
## 아직 모르는 가상화 계층의 병목 여부
|
|
|
|
실험을 걸기 전 다섯 지표의 기준값.
|
|
|
|
실험 구간의 호스트 CPU 와 게스트 CPU, 그리고 각 게스트의 steal time.
|
|
|
|
같은 구간의 Keycloak latency와 PostgreSQL latency.
|
|
|
|
가상화 쪽 지표가 얼마나 움직여야 실험 결과를 다르게 읽어야 하는지. 그 문턱을 아직 정하지 않았다.
|
|
|
|
두 가상 머신이 같은 호스트에 있으므로 한쪽 Keycloak 노드에 몰린 요청이 다른 쪽 게스트의 steal time 을 올리는지.
|
|
|
|
## 원인 섞임을 막는 기준
|
|
|
|
첫 refresh 경쟁 실험은 CPU 여유 상태에서 돌린다. 따라서 이 확인 때문에 부하 조건을 바꾸지 않고, 기존 실험에 호스트 CPU·게스트 CPU·steal time 관측만 덧붙인다.
|
|
|
|
이 호스트에서 그 다섯 지표를 잰 값이 없어 기준값부터 만들어야 한다. 실험 구간의 값만 있으면 그 값이 평소 값인지 실험 때문에 오른 값인지 갈리지 않는다.
|
|
|
|
현재 자료만으로는 가상화 계층이 refresh 실험 결과를 흔들지 않았다고 말할 수 없다. 그래서 애플리케이션 동시성 결론과 별개로, 같은 구간의 호스트 CPU와 steal time을 먼저 확인한다.
|
|
|
|
「현재 Keycloak/K3s 실험과의 관계」에서는 CPU 가상화가 refresh token 경쟁의 원인은 아니라고 적는다. 여기서 「포화되지 않았다」가 나와도 refresh 경쟁 실험의 결론이 바뀌지는 않고, 그 결론을 애플리케이션·저장소 쪽으로 읽어도 되는지만 갈린다.
|
|
|
|
Keycloak 지연과 PostgreSQL 지연은 refresh 실험에서 함께 기록하고, 가상화 계층 판정을 위해 호스트 CPU·게스트 CPU·steal time 세 가지를 같은 시간축에 추가한다.
|
|
|
|
## 같은 시간축에 놓을 지표
|
|
|
|
### 1. 실험을 그대로 두고 관찰만 덧붙인다
|
|
|
|
「현재 Keycloak 실험에서 CPU 문제를 오판하지 않기 위한 기준」에서는 첫 실험의 CPU 조건을 정해 두었으므로 실험 자체는 건드리지 않는다. 같은 실험을 돌리면서 호스트 쪽 QEMU vCPU 스레드 사용량과 게스트 쪽 %st 만 함께 기록한다. 이 방법으로는 이번 실험 구간에서 가상화 계층이 움직였는지 하나만 알 수 있다.
|
|
|
|
### 2. 실험 직전 구간을 기준값으로 따로 찍는다
|
|
|
|
부하를 걸기 전 같은 다섯 지표를 한 번 찍어 두면 실험 구간의 값을 견줄 대상이 생긴다. 기준값 없이 실험 구간만 찍으면 steal time 이 어떤 값으로 나오든 그것이 평소 값인지 실험 때문에 오른 값인지 판정할 수 없다.
|
|
|
|
### 3. 여섯 경계 가운데 가상화 쪽 둘만 먼저 잰다
|
|
|
|
여기서는 모든 계층을 새로 측정하지 않는다. 기존 실험이 애플리케이션·스토리지 지표를 이미 남긴다고 보고, 추가로 Virtualization과 Host 두 계층의 값만 붙인다.
|
|
|
|
### 4. 제외 — CPU 를 일부러 포화시켜 견준다
|
|
|
|
포화 구간과 여유 구간을 나란히 두면 CPU 자원 경쟁의 영향을 더 직접 볼 수 있다. 다만 첫 refresh 경쟁 실험은 CPU 여유 상태를 유지하는 조건이므로 같은 실행에서 일부러 포화를 만들지 않는다. 자원 포화 자체를 보는 부하 실험은 별도로 진행한다.
|
|
|
|
## refresh 부하에서는 같은 시간축으로 다시 묶어야 한다
|
|
|
|
1. refresh 요청을 보내기 전에 호스트 CPU, 게스트 CPU, steal time, Keycloak 지연, PostgreSQL 지연을 한 번 찍어 기준값으로 둔다.
|
|
2. refresh 경쟁 실험을 돌리면서 같은 다섯을 같은 시각에 기록한다. 게스트의 steal time 은 top (「Guest의 steal time 확인」), 호스트 쪽 QEMU vCPU 스레드는 ps -eLo pid,tid,psr,pcpu,comm | grep qemu (「thread가 실행되는 Host CPU 확인」) 로 본다.
|
|
3. Keycloak과 PostgreSQL latency는 같은 refresh 실행에서 기록한 값을 쓴다. Redis가 포함된 별도 구조를 시험할 때만 Redis 지표를 추가한다.
|
|
|
|
실험 구간의 호스트 CPU와 steal time이 기준값과 다르지 않다면 적어도 CPU 가상화 계층이 결과를 흔들었다는 근거는 없다. 둘 중 하나라도 크게 움직이면 같은 구간의 K3s throttling, 게스트 CPU, PostgreSQL 지연까지 다시 나눠 보고 refresh 경쟁 결과와 자원 포화 결과를 섞지 않는다.
|