test: 부하 아래에서 흔들리던 벽시계 시험을 원인 단언과 gate로 고친다 #34

Merged
donghyeon.kang merged 3 commits from claude/r9-wallclock-tests into main 2026-11-13 07:58:20 +00:00
3 Commits
Author SHA1 Message Date
donghyeon.kang b183a4f48e Merge branch 'main' into claude/r9-wallclock-tests
pr / done (pull_request) Successful in 12m59s
2026-11-13 06:28:57 +00:00
donghyeon.kang 62b4379fbf Merge branch 'main' into claude/r9-wallclock-tests
pr / done (pull_request) Canceled after 0s
2026-11-13 05:57:43 +00:00
DongHyeonka fdf775f636 test: 부하 아래에서 흔들리던 벽시계 시험을 원인 단언과 gate로 고친다
pr / done (pull_request) Canceled after 0s
문제: main 단계 CI는 desktop heavy lock 밖에서 부하 14~25 아래 돈다. main push run
221은 gRPC GrpcP1BoundaryWireTest 서버 기본 deadline 시험이 다른 status를, run 228은
httpclient FailureInjectionContractTest slow drip이 1.92s(상한 1.5s)를 내 빨갰다.
main 단계 lane을 전수로 보니 같은 부류가 더 있었다. 상한이 설정 예산에 바짝
붙었거나(예산+0.5s), 잰 구간에 준비 작업(컨테이너 기동, Flyway 준비, 첫 연결)이
들어가거나, 「아직 도는 동안」을 짧은 sleep·점유 시간으로 만든 시험들이다.

고친 것(시험만):
- httpclient slow drip: 상한 예산+4s(drip 전체 12.8s의 절반 아래임을 함께 단언),
  잰 구간에서 harness 닫기를 뺐다. AttemptDeadlineTest 둘은 deadline을 초 단위로.
- gRPC: 서버·client deadline 시험과 포화(SERVER_BUSY) 시험이 시험이 여는 gate로
  handler를 붙잡는다(취소되면 응답하지 않음). 서버 deadline 시험은 걸린 시간이 10s
  기본값보다 확실히 짧음(5s 아래)을 함께 단언해 설정한 150ms가 걸렸음을 본다.
  waitForReady, 대기 상한 30s. drain 시험은 연결을 먼저 맺고 drain·폴링 창 6s·4s.
- graphql deadline: sleep resolver를 gate로(상한 30s), 예산 2s, 응답 상한 예산+6s(기본
  예산 10s보다 짧다).
- persistence-jpa: lifecycle의 @Timeout이 컨테이너 기동을 덮던 것을 2분으로, 준비
  연결은 재시도해 받고 풀 고갈 상한 5s. migration 둘은 원인을 SQLState 55P03
  (lock_timeout)으로 단언하고 시간 상한 30s. NOWAIT는 contender의 lock_timeout이 0임을
  먼저 단언하고 상한 10s.
- cache-redis: live lease TTL 2s(밀려난 holder 케이스 넷이 1.5 TTL씩 잔다), fixed
  window 1시간.

버린 대안: 가짜 시계(deadline의 주인이 JDK HttpClient·Hikari·PostgreSQL·gRPC라 시험이
시계를 못 바꾼다), 상한 일률 배수(증명할 것과 가르지 못하는 값이 된다).

검증: desktop, CPU 부하(yes 24개, 12코어) 아래 바뀐 lane 전부 1084건, 리뷰 수정 뒤
다시 676건 실패 0. httpclient·gRPC lane 3회 반복 통과. verify.sh pr --no-cache 6805건
실패 0. RED: gRPC는 main·#25 이전·부하 유무 24회, httpclient는 main 부하 아래 4회 모두
통과해 desktop에서 재현되지 않았다. 고침은 CI 실패 둘과 코드 분석에 근거한다.
2026-11-13 14:56:38 +09:00