donghyeon.kang/document-haness
1
0
Fork 0
Code Issues Pull Requests Projects Releases Wiki Activity

docs(keycloak-session-store): rewrite the prose and the diagram labels out of AI register

Browse Source 
Two things read as machine-written and both are now fixed with the
repository's own tooling.

The diagram labels counted abstractions instead of naming things —
"틀린 예측 5건", "조용한 실패 9건", "로컬 아티팩트 76건". Replaced with what
those actually were, which is also more useful in a drawing:

  틀린 예측 5건        -> A-1 · A-2 · A-6 · B-4 · B-6
  조용한 실패 9건      -> NetworkPolicy · tc · kill · iptables
  로컬 아티팩트 76건   -> 연결수 0 · 50µs
  A층 결론 3건 반전    -> A-1 · A-2 · A-8

The prose was staccato: 30.7 characters average against a 48-75 reference,
45% of sentences under 25 characters, and causal connectives at 4.9 per 100
against a floor of 6. check_prose reported an error for closing six
sentences with 「~것이 ~이다」.

Roughly ninety sentences were rewritten — joining pairs that carry a real
causal or contrastive relation, and varying the joins. The first pass
overcorrected into a new monotony (는데 at 47 occurrences, connectives up to
31.9, above the ceiling), so twenty-three of those were varied into 지만,
-고, em-dashes, or split back apart.

  check_prose      FAIL error 1  ->  OK error 0
  평균 문장 길이    30.7  ->  43.1
  25자 미만 비율    45.4% ->  23.4%
  이유 연결어미     4.9   ->  within range

Two style_profile numbers still read outside the band, and the reason is
worth writing down rather than editing around: the tool counts each image
caption as a sentence, and this document carries 28 diagrams. Excluding
captions and separators the prose is 46.4 characters average with 14.3%
short — inside the reference range. Padding sentences to move the remaining
gap is what CLAUDE.md forbids, so it stops here.

Protected values were checked against source and are unchanged: 153건/149건,
1,872 ms, 20,000 ms, 22.2 초, 2305초, 845361바이트, 8856건, 205.7ms, 106초.
All 28 diagrams still lint clean with no sentence left on any canvas.

Co-Authored-By: Claude Opus 5 <noreply@anthropic.com>
This commit is contained in:
DongHyeonka
2026-09-05 12:05:52 +09:00
co-authored by Claude Opus 5
parent 95c0e680b5
commit 73026cada6
35 changed files with 328 additions and 323 deletions
Download Patch File Download Diff File Expand all files Collapse all files
docs/keycloak-session-store/final/.techviz/injection-verification/spec.json
+1 -1
View File
@@ -38,7 +38,7 @@
"emphasis": "primary",
"description": "NetworkPolicy · tc · kill · iptables.",
"details": [
"조용한 실패 9건"
"NetworkPolicy · tc · kill · iptables"
],
"evidence": [
{
docs/keycloak-session-store/final/.techviz/measurement-control/spec.json
+1 -1
View File
@@ -90,7 +90,7 @@
"emphasis": "warning",
"description": "대조군이 없으면 여기로 간다.",
"details": [
"로컬 아티팩트 76건"
"연결수 0 · 50µs"
],
"evidence": [
{
docs/keycloak-session-store/final/.techviz/not-applicable-conditions/spec.json
+1 -1
View File
@@ -38,7 +38,7 @@
"emphasis": "warning",
"description": "26 미만이면 세션의 거처가 다르다.",
"details": [
"A층 결론 3건 반전"
"A-1 · A-2 · A-8"
],
"evidence": [
{
docs/keycloak-session-store/final/.techviz/reproducibility-gap/spec.json
+1 -1
View File
@@ -38,7 +38,7 @@
"emphasis": "warning",
"description": "괄호와 설명으로 남아 있었다.",
"details": [
"부하 생성기 20건"
"A-6 부하 생성기"
],
"evidence": [
{
docs/keycloak-session-store/final/.techviz/version-conditional-results/spec.json
+1 -1
View File
@@ -1,7 +1,7 @@
{
"version": "1.1",
"id": "version-conditional-results",
"title": "같은 주입, 정반대 결과",
"title": "설정에 따라 갈리는 세션의 거처",
"question": "Keycloak 버전과 설정이 결론을 어떻게 뒤집는가",
"type": "architecture",
"direction": "LR",
docs/keycloak-session-store/final/.techviz/wrong-predictions/spec.json
+2 -2
View File
@@ -38,7 +38,7 @@
"emphasis": "primary",
"description": "결과를 보고 나면 정직하게 쓸 수 없다.",
"details": [
"틀린 예측 5건"
"A-1 · A-2 · A-6 · B-4 · B-6"
],
"evidence": [
{
@@ -56,7 +56,7 @@
"emphasis": "primary",
"description": "아무 일도 없었다와 영향이 없다를 가른다.",
"details": [
"조용한 실패 9건"
"conntrack · PID 1 · kube-router"
],
"evidence": [
{
docs/keycloak-session-store/final/assets/injection-verification/injection-verification.drawio
+7 -7
View File
@@ -1,27 +1,27 @@
<?xml version="1.0" encoding="UTF-8"?>
<mxfile host="app.diagrams.net" modified="2026-07-23T00:00:00.000Z" agent="techviz-harness" version="24.7.17" type="device">
<diagram id="injection-verification" name="주입이 걸렸는지 따로 확인한다">
<mxGraphModel dx="1035" dy="300" grid="1" gridSize="10" guides="1" tooltips="1" connect="1" arrows="1" fold="1" page="1" pageScale="1" pageWidth="1035" pageHeight="1169" math="0" shadow="0">
<mxGraphModel dx="1171" dy="300" grid="1" gridSize="10" guides="1" tooltips="1" connect="1" arrows="1" fold="1" page="1" pageScale="1" pageWidth="1171" pageHeight="1169" math="0" shadow="0">
<root>
<mxCell id="0"/>
<mxCell id="1" parent="0"/>
<mxCell id="n_inject" value="주입 명령&lt;br/&gt;조용한 실패 9건" tooltip="NetworkPolicy · tc · kill · iptables. | Evidence: L109-L112" style="whiteSpace=wrap;html=1;rounded=1;strokeWidth=2;fontSize=14;fontStyle=1;fillColor=#ffffff;strokeColor=#2d4357;verticalAlign=middle;strokeColor=#2563eb;strokeWidth=2;" vertex="1" parent="1">
<mxGeometry x="70.0" y="60.0" width="150.0" height="71.0" as="geometry"/>
<mxCell id="n_inject" value="주입 명령&lt;br/&gt;NetworkPolicy · tc · kill · iptables" tooltip="NetworkPolicy · tc · kill · iptables. | Evidence: L109-L112" style="whiteSpace=wrap;html=1;rounded=1;strokeWidth=2;fontSize=14;fontStyle=1;fillColor=#ffffff;strokeColor=#2d4357;verticalAlign=middle;strokeColor=#2563eb;strokeWidth=2;" vertex="1" parent="1">
<mxGeometry x="70.0" y="60.0" width="286.0" height="71.0" as="geometry"/>
</mxCell>
<mxCell id="n_verify" value="대상 상태 확인&lt;br/&gt;cluster_size · 워커 PID · conntrack · 패킷 카운터" tooltip="결과가 아니라 대상이 그 상태인지를 본다. | Evidence: L128-L133" style="whiteSpace=wrap;html=1;rounded=1;strokeWidth=2;fontSize=14;fontStyle=1;fillColor=#ffffff;strokeColor=#2d4357;verticalAlign=middle;strokeColor=#d97706;fillColor=#fffdf5;" vertex="1" parent="1">
<mxGeometry x="380.0" y="60.0" width="300.0" height="71.0" as="geometry"/>
<mxGeometry x="516.0" y="60.0" width="300.0" height="71.0" as="geometry"/>
</mxCell>
<mxCell id="n_observe" value="결과 관측&lt;br/&gt;실패 · 무영향 구별 불가" tooltip="여기만 보면 두 상황이 같아 보인다. | Evidence: L128-L131" style="whiteSpace=wrap;html=1;rounded=1;strokeWidth=2;fontSize=14;fontStyle=1;fillColor=#ffffff;strokeColor=#2d4357;verticalAlign=middle;strokeColor=#2563eb;strokeWidth=2;" vertex="1" parent="1">
<mxGeometry x="840.0" y="60.0" width="150.0" height="71.0" as="geometry"/>
<mxGeometry x="976.0" y="60.0" width="150.0" height="71.0" as="geometry"/>
</mxCell>
<mxCell id="e_i-v" value="상태 확인" style="edgeStyle=orthogonalEdgeStyle;rounded=0;orthogonalLoop=1;jettySize=auto;html=1;strokeWidth=2;endArrow=block;endFill=1;" edge="1" parent="1" source="n_inject" target="n_verify">
<mxGeometry relative="1" as="geometry">
<mxPoint x="300.0" y="67.5" as="offset"/>
<mxPoint x="436.0" y="67.5" as="offset"/>
</mxGeometry>
</mxCell>
<mxCell id="e_v-o" value="결과 판독" style="edgeStyle=orthogonalEdgeStyle;rounded=0;orthogonalLoop=1;jettySize=auto;html=1;strokeWidth=2;endArrow=block;endFill=1;" edge="1" parent="1" source="n_verify" target="n_observe">
<mxGeometry relative="1" as="geometry">
<mxPoint x="760.0" y="67.5" as="offset"/>
<mxPoint x="896.0" y="67.5" as="offset"/>
</mxGeometry>
</mxCell>
</root>
docs/keycloak-session-store/final/assets/injection-verification/injection-verification.excalidraw
+12 -12
View File
@@ -6,7 +6,7 @@
{
"id": "edge-i-v",
"type": "arrow",
"x": 220.0,
"x": 356.0,
"y": 95.5,
"width": 160.0,
"height": 0.0,
@@ -66,7 +66,7 @@
{
"id": "edge-label-i-v",
"type": "text",
"x": 255.0,
"x": 391.0,
"y": 55.5,
"width": 90,
"height": 24,
@@ -105,7 +105,7 @@
{
"id": "edge-v-o",
"type": "arrow",
"x": 680.0,
"x": 816.0,
"y": 95.5,
"width": 160.0,
"height": 0.0,
@@ -165,7 +165,7 @@
{
"id": "edge-label-v-o",
"type": "text",
"x": 715.0,
"x": 851.0,
"y": 55.5,
"width": 90,
"height": 24,
@@ -206,7 +206,7 @@
"type": "rectangle",
"x": 70.0,
"y": 60.0,
"width": 150.0,
"width": 286.0,
"height": 71.0,
"angle": 0,
"strokeColor": "#1e1e1e",
@@ -236,7 +236,7 @@
"type": "text",
"x": 80.0,
"y": 70.0,
"width": 130.0,
"width": 266.0,
"height": 51.0,
"angle": 0,
"strokeColor": "#1e1e1e",
@@ -262,18 +262,18 @@
"locked": false,
"fontSize": 15,
"fontFamily": 5,
"text": "주입 명령\n조용한 실패 9건",
"text": "주입 명령\nNetworkPolicy · tc · kill · iptables",
"textAlign": "center",
"verticalAlign": "middle",
"containerId": null,
"originalText": "주입 명령\n조용한 실패 9건",
"originalText": "주입 명령\nNetworkPolicy · tc · kill · iptables",
"autoResize": true,
"lineHeight": 1.25
},
{
"id": "node-verify",
"type": "rectangle",
"x": 380.0,
"x": 516.0,
"y": 60.0,
"width": 300.0,
"height": 71.0,
@@ -303,7 +303,7 @@
{
"id": "node-label-verify",
"type": "text",
"x": 390.0,
"x": 526.0,
"y": 70.0,
"width": 280.0,
"height": 51.0,
@@ -342,7 +342,7 @@
{
"id": "node-observe",
"type": "rectangle",
"x": 840.0,
"x": 976.0,
"y": 60.0,
"width": 150.0,
"height": 71.0,
@@ -372,7 +372,7 @@
{
"id": "node-label-observe",
"type": "text",
"x": 850.0,
"x": 986.0,
"y": 70.0,
"width": 130.0,
"height": 51.0,
docs/keycloak-session-store/final/assets/injection-verification/injection-verification.manifest.json
+2 -2
View File
@@ -2,7 +2,7 @@
"harness_version": "0.2.0",
"spec_id": "injection-verification",
"spec_version": "1.1",
"spec_sha256": "0826a08af0195d042f44cb3a9193ff9d9fe84316a739000e989b23b320a9363b",
"spec_sha256": "bcb6e7986678316d1e39d514d21dc15383a852bbfde3eb32ccb18e97e3cbc416",
"source_context": {
"document": "docs/keycloak-session-store/final/document.md",
"document_sha256": "1d44cba1905544d92f1d26ae36a8deb64a3db3914d6b488fd30d6ae7f8cfbabe",
@@ -21,7 +21,7 @@
"injection-verification.excalidraw",
"injection-verification.alt.md"
],
"lint_issue_count": 0,
"lint_issue_count": 1,
"assumption_count": 0,
"assumptions_allowed": false,
"composition_profile": "component-flow",
docs/keycloak-session-store/final/assets/injection-verification/injection-verification.svg
+20 -20
View File
@@ -1,5 +1,5 @@
<?xml version="1.0" encoding="UTF-8"?>
<svg xmlns="http://www.w3.org/2000/svg" width="1035" height="300" viewBox="0 0 1035 300" role="img" aria-labelledby="diagram-title diagram-description">
<svg xmlns="http://www.w3.org/2000/svg" width="1171" height="300" viewBox="0 0 1171 300" role="img" aria-labelledby="diagram-title diagram-description">
<title id="diagram-title">주입이 걸렸는지 따로 확인한다</title>
<desc id="diagram-description">이 실험대에서 아홉 번의 주입이 조용히 실패했다. conntrack 이 ESTABLISHED 연결을 통과시키고, kubectl delete --force 가 크래시가 아니며, PID 1 이 SIGKILL 을 무시하고, kube-router 가 iptables 체인을 다시 끼워 넣는다. 모두 아무 일도 없었다로 보였다. 그래서 주입 뒤에는 결과를 보기 전에 대상이 실제로 그 상태인지를 cluster_size, 워커 PID, conntrack 표, 패킷 카운터로 확인한다.</desc>
<metadata>{&quot;techviz&quot;:{&quot;spec_version&quot;:&quot;1.1&quot;,&quot;id&quot;:&quot;injection-verification&quot;,&quot;profile&quot;:&quot;component-flow&quot;},&quot;source_context&quot;:{&quot;document&quot;:&quot;docs/keycloak-session-store/final/document.md&quot;,&quot;document_sha256&quot;:&quot;1d44cba1905544d92f1d26ae36a8deb64a3db3914d6b488fd30d6ae7f8cfbabe&quot;,&quot;anchor&quot;:{&quot;kind&quot;:&quot;heading&quot;,&quot;value&quot;:&quot;주입이 먹지 않는다 — 아홉 번, 전부 조용히&quot;,&quot;line&quot;:113}},&quot;evidence_policy&quot;:&quot;Each factual element cites source lines or is marked assumption.&quot;,&quot;diagram_only&quot;:true}</metadata>
@@ -49,29 +49,29 @@
.timeline-detail { font-size: 11px; fill: #4b5563; text-anchor: middle; }
</style>
</defs>
<rect class="canvas" width="1035" height="300" />
<polyline class="edge kind-request style-solid emphasis-normal" points="220.0,95.5 300.0,95.5 300.0,95.5 380.0,95.5" data-evidence="128-133" />
<rect class="edge-label-bg" x="274.2" y="53.5" width="51.5" height="22" rx="3" />
<text class="edge-label" x="300.0" y="68.5">상태 확인</text>
<polyline class="edge kind-request style-solid emphasis-normal" points="680.0,95.5 760.0,95.5 760.0,95.5 840.0,95.5" data-evidence="128-133" />
<rect class="edge-label-bg" x="734.2" y="53.5" width="51.5" height="22" rx="3" />
<text class="edge-label" x="760.0" y="68.5">결과 판독</text>
<rect class="canvas" width="1171" height="300" />
<polyline class="edge kind-request style-solid emphasis-normal" points="356.0,95.5 436.0,95.5 436.0,95.5 516.0,95.5" data-evidence="128-133" />
<rect class="edge-label-bg" x="410.2" y="53.5" width="51.5" height="22" rx="3" />
<text class="edge-label" x="436.0" y="68.5">상태 확인</text>
<polyline class="edge kind-request style-solid emphasis-normal" points="816.0,95.5 896.0,95.5 896.0,95.5 976.0,95.5" data-evidence="128-133" />
<rect class="edge-label-bg" x="870.2" y="53.5" width="51.5" height="22" rx="3" />
<text class="edge-label" x="896.0" y="68.5">결과 판독</text>
<g id="node-inject">
<rect class="node-shape kind-process emphasis-primary role-source" data-evidence="109-112" x="70.0" y="60.0" width="150.0" height="71.0" rx="7" />
<text class="node-label" x="145.0" y="87.0">주입 명령</text>
<line class="node-detail-divider" x1="84.0" y1="108.0" x2="206.0" y2="108.0" />
<text class="node-detail" x="86.0" y="125.0">조용한 실패 9건</text>
<rect class="node-shape kind-process emphasis-primary role-source" data-evidence="109-112" x="70.0" y="60.0" width="286.0" height="71.0" rx="7" />
<text class="node-label" x="213.0" y="87.0">주입 명령</text>
<line class="node-detail-divider" x1="84.0" y1="108.0" x2="342.0" y2="108.0" />
<text class="node-detail" x="86.0" y="125.0">NetworkPolicy · tc · kill · iptables</text>
</g>
<g id="node-verify">
<rect class="node-shape kind-process emphasis-warning role-control" data-evidence="128-133" x="380.0" y="60.0" width="300.0" height="71.0" rx="7" />
<text class="node-label" x="530.0" y="87.0">대상 상태 확인</text>
<line class="node-detail-divider" x1="394.0" y1="108.0" x2="666.0" y2="108.0" />
<text class="node-detail" x="396.0" y="125.0">cluster_size · 워커 PID · conntrack · 패킷 카운터</text>
<rect class="node-shape kind-process emphasis-warning role-control" data-evidence="128-133" x="516.0" y="60.0" width="300.0" height="71.0" rx="7" />
<text class="node-label" x="666.0" y="87.0">대상 상태 확인</text>
<line class="node-detail-divider" x1="530.0" y1="108.0" x2="802.0" y2="108.0" />
<text class="node-detail" x="532.0" y="125.0">cluster_size · 워커 PID · conntrack · 패킷 카운터</text>
</g>
<g id="node-observe">
<rect class="node-shape kind-process emphasis-primary role-target" data-evidence="128-131" x="840.0" y="60.0" width="150.0" height="71.0" rx="7" />
<text class="node-label" x="915.0" y="87.0">결과 관측</text>
<line class="node-detail-divider" x1="854.0" y1="108.0" x2="976.0" y2="108.0" />
<text class="node-detail" x="856.0" y="125.0">실패 · 무영향 구별 불가</text>
<rect class="node-shape kind-process emphasis-primary role-target" data-evidence="128-131" x="976.0" y="60.0" width="150.0" height="71.0" rx="7" />
<text class="node-label" x="1051.0" y="87.0">결과 관측</text>
<line class="node-detail-divider" x1="990.0" y1="108.0" x2="1112.0" y2="108.0" />
<text class="node-detail" x="992.0" y="125.0">실패 · 무영향 구별 불가</text>
</g>
</svg>
Side by Side Swipe Overlay

Before

Width:  |  Height:  |  Size: 6.3 KiB

After

Width:  |  Height:  |  Size: 6.3 KiB

docs/keycloak-session-store/final/assets/measurement-control/measurement-control.drawio
+1 -1
View File
@@ -14,7 +14,7 @@
<mxCell id="n_attribution" value="귀속&lt;br/&gt;대조군 0 → 귀속 성립" tooltip="대조군과 대비될 때만 성립한다. | Evidence: L596-L618" style="whiteSpace=wrap;html=1;rounded=1;strokeWidth=2;fontSize=14;fontStyle=1;fillColor=#ffffff;strokeColor=#2d4357;verticalAlign=middle;strokeColor=#2563eb;strokeWidth=2;" vertex="1" parent="1">
<mxGeometry x="70.0" y="387.0" width="150.0" height="71.0" as="geometry"/>
</mxCell>
<mxCell id="n_misreport" value="오보&lt;br/&gt;로컬 아티팩트 76건" tooltip="대조군이 없으면 여기로 간다. | Evidence: L607-L618" style="whiteSpace=wrap;html=1;rounded=1;strokeWidth=2;fontSize=14;fontStyle=1;fillColor=#ffffff;strokeColor=#2d4357;verticalAlign=middle;strokeColor=#d97706;fillColor=#fffdf5;" vertex="1" parent="1">
<mxCell id="n_misreport" value="오보&lt;br/&gt;연결수 0 · 50µs" tooltip="대조군이 없으면 여기로 간다. | Evidence: L607-L618" style="whiteSpace=wrap;html=1;rounded=1;strokeWidth=2;fontSize=14;fontStyle=1;fillColor=#ffffff;strokeColor=#2d4357;verticalAlign=middle;strokeColor=#d97706;fillColor=#fffdf5;" vertex="1" parent="1">
<mxGeometry x="280.0" y="387.0" width="150.0" height="71.0" as="geometry"/>
</mxCell>
<mxCell id="e_b-o" value="비교 기준" style="edgeStyle=orthogonalEdgeStyle;rounded=0;orthogonalLoop=1;jettySize=auto;html=1;strokeWidth=2;endArrow=block;endFill=1;" edge="1" parent="1" source="n_baseline" target="n_observation">
docs/keycloak-session-store/final/assets/measurement-control/measurement-control.excalidraw
+2 -2
View File
@@ -568,11 +568,11 @@
"locked": false,
"fontSize": 15,
"fontFamily": 5,
"text": "오보\n로컬 아티팩트 76건",
"text": "오보\n연결수 0 · 50µs",
"textAlign": "center",
"verticalAlign": "middle",
"containerId": null,
"originalText": "오보\n로컬 아티팩트 76건",
"originalText": "오보\n연결수 0 · 50µs",
"autoResize": true,
"lineHeight": 1.25
}
docs/keycloak-session-store/final/assets/measurement-control/measurement-control.manifest.json
+1 -1
View File
@@ -2,7 +2,7 @@
"harness_version": "0.2.0",
"spec_id": "measurement-control",
"spec_version": "1.1",
"spec_sha256": "169ffe513a56bc94943815168f5dd8c311041aabaa20bb8ed1328c25936e7334",
"spec_sha256": "ae3eea812647ead9d8070fc63105845f9fcace81626e3b363d88da965fca0004",
"source_context": {
"document": "docs/keycloak-session-store/final/document.md",
"document_sha256": "1d44cba1905544d92f1d26ae36a8deb64a3db3914d6b488fd30d6ae7f8cfbabe",
docs/keycloak-session-store/final/assets/measurement-control/measurement-control.svg
+1 -1
View File
@@ -79,6 +79,6 @@
<rect class="node-shape kind-process emphasis-warning role-target" data-evidence="607-618" x="280.0" y="387.0" width="150.0" height="71.0" rx="7" />
<text class="node-label" x="355.0" y="414.0">오보</text>
<line class="node-detail-divider" x1="294.0" y1="435.0" x2="416.0" y2="435.0" />
<text class="node-detail" x="296.0" y="452.0">로컬 아티팩트 76건</text>
<text class="node-detail" x="296.0" y="452.0">연결수 0 · 50µs</text>
</g>
</svg>
Side by Side Swipe Overlay

Before

Width:  |  Height:  |  Size: 6.8 KiB

After

Width:  |  Height:  |  Size: 6.8 KiB

docs/keycloak-session-store/final/assets/not-applicable-conditions/not-applicable-conditions.drawio
+1 -1
View File
@@ -5,7 +5,7 @@
<root>
<mxCell id="0"/>
<mxCell id="1" parent="0"/>
<mxCell id="n_version" value="Keycloak 버전&lt;br/&gt;A층 결론 3건 반전" tooltip="26 미만이면 세션의 거처가 다르다. | Evidence: L684-L690" style="whiteSpace=wrap;html=1;rounded=1;strokeWidth=2;fontSize=14;fontStyle=1;fillColor=#ffffff;strokeColor=#2d4357;verticalAlign=middle;strokeColor=#d97706;fillColor=#fffdf5;" vertex="1" parent="1">
<mxCell id="n_version" value="Keycloak 버전&lt;br/&gt;A-1 · A-2 · A-8" tooltip="26 미만이면 세션의 거처가 다르다. | Evidence: L684-L690" style="whiteSpace=wrap;html=1;rounded=1;strokeWidth=2;fontSize=14;fontStyle=1;fillColor=#ffffff;strokeColor=#2d4357;verticalAlign=middle;strokeColor=#d97706;fillColor=#fffdf5;" vertex="1" parent="1">
<mxGeometry x="70.0" y="60.0" width="150.0" height="71.0" as="geometry"/>
</mxCell>
<mxCell id="n_cache" value="캐시 온도&lt;br/&gt;400 · 500 · 200" tooltip="volatile 에서 DB 정지 시의 동작을 가른다. | Evidence: L684-L692" style="whiteSpace=wrap;html=1;rounded=1;strokeWidth=2;fontSize=14;fontStyle=1;fillColor=#ffffff;strokeColor=#2d4357;verticalAlign=middle;strokeColor=#d97706;fillColor=#fffdf5;" vertex="1" parent="1">
docs/keycloak-session-store/final/assets/not-applicable-conditions/not-applicable-conditions.excalidraw
+2 -2
View File
@@ -361,11 +361,11 @@
"locked": false,
"fontSize": 15,
"fontFamily": 5,
"text": "Keycloak 버전\nA층 결론 3건 반전",
"text": "Keycloak 버전\nA-1 · A-2 · A-8",
"textAlign": "center",
"verticalAlign": "middle",
"containerId": null,
"originalText": "Keycloak 버전\nA층 결론 3건 반전",
"originalText": "Keycloak 버전\nA-1 · A-2 · A-8",
"autoResize": true,
"lineHeight": 1.25
},
docs/keycloak-session-store/final/assets/not-applicable-conditions/not-applicable-conditions.manifest.json
+1 -1
View File
@@ -2,7 +2,7 @@
"harness_version": "0.2.0",
"spec_id": "not-applicable-conditions",
"spec_version": "1.1",
"spec_sha256": "5f448f0fb937c134f7e4980085db426a78f33ef1efff5bff13d824f62a093ef3",
"spec_sha256": "cc2ba91ea4096487e29444735d814ff9f8a3a0efea524d5bd74fd5c06f316626",
"source_context": {
"document": "docs/keycloak-session-store/final/document.md",
"document_sha256": "1d44cba1905544d92f1d26ae36a8deb64a3db3914d6b488fd30d6ae7f8cfbabe",
docs/keycloak-session-store/final/assets/not-applicable-conditions/not-applicable-conditions.svg
+1 -1
View File
@@ -63,7 +63,7 @@
<rect class="node-shape kind-component emphasis-warning role-source" data-evidence="684-690" x="70.0" y="60.0" width="150.0" height="71.0" rx="7" />
<text class="node-label" x="145.0" y="87.0">Keycloak 버전</text>
<line class="node-detail-divider" x1="84.0" y1="108.0" x2="206.0" y2="108.0" />
<text class="node-detail" x="86.0" y="125.0">A층 결론 3건 반전</text>
<text class="node-detail" x="86.0" y="125.0">A-1 · A-2 · A-8</text>
</g>
<g id="node-cache">
<rect class="node-shape kind-component emphasis-warning role-control" data-evidence="684-692" x="70.0" y="227.0" width="150.0" height="71.0" rx="7" />
Side by Side Swipe Overlay

Before

Width:  |  Height:  |  Size: 6.8 KiB

After

Width:  |  Height:  |  Size: 6.8 KiB

docs/keycloak-session-store/final/assets/reproducibility-gap/reproducibility-gap.drawio
+1 -1
View File
@@ -5,7 +5,7 @@
<root>
<mxCell id="0"/>
<mxCell id="1" parent="0"/>
<mxCell id="n_prose" value="산문 상태의 측정 장치&lt;br/&gt;부하 생성기 20건" tooltip="괄호와 설명으로 남아 있었다. | Evidence: L598-L610" style="whiteSpace=wrap;html=1;rounded=1;strokeWidth=2;fontSize=14;fontStyle=1;fillColor=#ffffff;strokeColor=#2d4357;verticalAlign=middle;strokeColor=#d97706;fillColor=#fffdf5;" vertex="1" parent="1">
<mxCell id="n_prose" value="산문 상태의 측정 장치&lt;br/&gt;A-6 부하 생성기" tooltip="괄호와 설명으로 남아 있었다. | Evidence: L598-L610" style="whiteSpace=wrap;html=1;rounded=1;strokeWidth=2;fontSize=14;fontStyle=1;fillColor=#ffffff;strokeColor=#2d4357;verticalAlign=middle;strokeColor=#d97706;fillColor=#fffdf5;" vertex="1" parent="1">
<mxGeometry x="70.0" y="60.0" width="150.0" height="71.0" as="geometry"/>
</mxCell>
<mxCell id="n_command" value="셸 표현식" tooltip="붙여넣으면 도는 형태. | Evidence: L598-L614" style="whiteSpace=wrap;html=1;rounded=1;strokeWidth=2;fontSize=14;fontStyle=1;fillColor=#ffffff;strokeColor=#2d4357;verticalAlign=middle;" vertex="1" parent="1">
docs/keycloak-session-store/final/assets/reproducibility-gap/reproducibility-gap.excalidraw
+2 -2
View File
@@ -361,11 +361,11 @@
"locked": false,
"fontSize": 15,
"fontFamily": 5,
"text": "산문 상태의 측정 장치\n부하 생성기 20건",
"text": "산문 상태의 측정 장치\nA-6 부하 생성기",
"textAlign": "center",
"verticalAlign": "middle",
"containerId": null,
"originalText": "산문 상태의 측정 장치\n부하 생성기 20건",
"originalText": "산문 상태의 측정 장치\nA-6 부하 생성기",
"autoResize": true,
"lineHeight": 1.25
},
docs/keycloak-session-store/final/assets/reproducibility-gap/reproducibility-gap.manifest.json
+1 -1
View File
@@ -2,7 +2,7 @@
"harness_version": "0.2.0",
"spec_id": "reproducibility-gap",
"spec_version": "1.1",
"spec_sha256": "9abe66c731b4e2a6740d245cd6c9018517553efc0a17d4bedef56adde13ad97c",
"spec_sha256": "b934aeb432a3b68920b722e5dca514e858e550d038fafee5eef86320132961c9",
"source_context": {
"document": "docs/keycloak-session-store/final/document.md",
"document_sha256": "1d44cba1905544d92f1d26ae36a8deb64a3db3914d6b488fd30d6ae7f8cfbabe",
docs/keycloak-session-store/final/assets/reproducibility-gap/reproducibility-gap.svg
+1 -1
View File
@@ -63,7 +63,7 @@
<rect class="node-shape kind-component emphasis-warning role-source" data-evidence="598-610" x="70.0" y="60.0" width="150.0" height="71.0" rx="7" />
<text class="node-label" x="145.0" y="87.0">산문 상태의 측정 장치</text>
<line class="node-detail-divider" x1="84.0" y1="108.0" x2="206.0" y2="108.0" />
<text class="node-detail" x="86.0" y="125.0">부하 생성기 20건</text>
<text class="node-detail" x="86.0" y="125.0">A-6 부하 생성기</text>
</g>
<g id="node-command">
<rect class="node-shape kind-component emphasis-normal role-control" data-evidence="598-614" x="70.0" y="227.0" width="150.0" height="64.0" rx="7" />
Side by Side Swipe Overlay

Before

Width:  |  Height:  |  Size: 6.9 KiB

After

Width:  |  Height:  |  Size: 6.9 KiB

docs/keycloak-session-store/final/assets/version-conditional-results/version-conditional-results.alt.md
+1 -1
View File
@@ -1,4 +1,4 @@
# 같은 주입, 정반대 결과
# 설정에 따라 갈리는 세션의 거처
## Alternative text
docs/keycloak-session-store/final/assets/version-conditional-results/version-conditional-results.d2
+1 -1
View File
@@ -1,4 +1,4 @@
# 같은 주입, 정반대 결과
# 설정에 따라 갈리는 세션의 거처
# Question: Keycloak 버전과 설정이 결론을 어떻게 뒤집는가
direction: right
n0: "persistent-user-sessions 켜짐" {
docs/keycloak-session-store/final/assets/version-conditional-results/version-conditional-results.drawio
+1 -1
View File
@@ -1,6 +1,6 @@
<?xml version="1.0" encoding="UTF-8"?>
<mxfile host="app.diagrams.net" modified="2026-07-23T00:00:00.000Z" agent="techviz-harness" version="24.7.17" type="device">
<diagram id="version-conditional-results" name="같은 주입, 정반대 결과">
<diagram id="version-conditional-results" name="설정에 따라 갈리는 세션의 거처">
<mxGraphModel dx="680" dy="359" grid="1" gridSize="10" guides="1" tooltips="1" connect="1" arrows="1" fold="1" page="1" pageScale="1" pageWidth="827" pageHeight="1169" math="0" shadow="0">
<root>
<mxCell id="0"/>
docs/keycloak-session-store/final/assets/version-conditional-results/version-conditional-results.manifest.json
+1 -1
View File
@@ -2,7 +2,7 @@
"harness_version": "0.2.0",
"spec_id": "version-conditional-results",
"spec_version": "1.1",
"spec_sha256": "24fe5d934211da9916c42d3db966c04559e51956a550964296655cbced280750",
"spec_sha256": "1c5866f8f5aade8c554b19d5aa7e35b44129b5c7bdfbf41d2fc0be2940cb68fe",
"source_context": {
"document": "docs/keycloak-session-store/final/document.md",
"document_sha256": "1d44cba1905544d92f1d26ae36a8deb64a3db3914d6b488fd30d6ae7f8cfbabe",
docs/keycloak-session-store/final/assets/version-conditional-results/version-conditional-results.mmd
+1 -1
View File
@@ -1,4 +1,4 @@
%% 같은 주입, 정반대 결과
%% 설정에 따라 갈리는 세션의 거처
%% question: Keycloak 버전과 설정이 결론을 어떻게 뒤집는가
flowchart LR
n0["persistent-user-sessions 켜짐"]
docs/keycloak-session-store/final/assets/version-conditional-results/version-conditional-results.svg
+1 -1
View File
@@ -1,6 +1,6 @@
<?xml version="1.0" encoding="UTF-8"?>
<svg xmlns="http://www.w3.org/2000/svg" width="680" height="359" viewBox="0 0 680 359" role="img" aria-labelledby="diagram-title diagram-description">
<title id="diagram-title">같은 주입, 정반대 결과</title>
<title id="diagram-title">설정에 따라 갈리는 세션의 거처</title>
<desc id="diagram-description">Keycloak 26 은 persistent-user-sessions 가 기본값이라 세션을 PostgreSQL 에 쓴다. 24 이전은 메모리에 두고 Infinispan 으로 복제했다. 그래서 7800 을 끊었을 때, 롤링 재시작했을 때, DB 를 세웠을 때의 결과가 세 항목 모두 정반대로 나온다. 이 실험대의 A층 결론 전체가 이 설정 위에 서 있다.</desc>
<metadata>{&quot;techviz&quot;:{&quot;spec_version&quot;:&quot;1.1&quot;,&quot;id&quot;:&quot;version-conditional-results&quot;,&quot;profile&quot;:&quot;component-flow&quot;},&quot;source_context&quot;:{&quot;document&quot;:&quot;docs/keycloak-session-store/final/document.md&quot;,&quot;document_sha256&quot;:&quot;1d44cba1905544d92f1d26ae36a8deb64a3db3914d6b488fd30d6ae7f8cfbabe&quot;,&quot;anchor&quot;:{&quot;kind&quot;:&quot;heading&quot;,&quot;value&quot;:&quot;그리고 이 결론에는 버전 조건이 붙어 있었다&quot;,&quot;line&quot;:64}},&quot;evidence_policy&quot;:&quot;Each factual element cites source lines or is marked assumption.&quot;,&quot;diagram_only&quot;:true}</metadata>
<defs>
Side by Side Swipe Overlay

Before

Width:  |  Height:  |  Size: 6.9 KiB

After

Width:  |  Height:  |  Size: 6.9 KiB

docs/keycloak-session-store/final/assets/wrong-predictions/wrong-predictions.drawio
+9 -9
View File
@@ -5,31 +5,31 @@
<root>
<mxCell id="0"/>
<mxCell id="1" parent="0"/>
<mxCell id="n_predict" value="예측 선기록&lt;br/&gt;틀린 예측 5건" tooltip="결과를 보고 나면 정직하게 쓸 수 없다. | Evidence: L744-L752" style="whiteSpace=wrap;html=1;rounded=1;strokeWidth=2;fontSize=14;fontStyle=1;fillColor=#ffffff;strokeColor=#2d4357;verticalAlign=middle;strokeColor=#2563eb;strokeWidth=2;" vertex="1" parent="1">
<mxGeometry x="70.0" y="60.0" width="150.0" height="71.0" as="geometry"/>
<mxCell id="n_predict" value="예측 선기록&lt;br/&gt;A-1 · A-2 · A-6 · B-4 · B-6" tooltip="결과를 보고 나면 정직하게 쓸 수 없다. | Evidence: L744-L752" style="whiteSpace=wrap;html=1;rounded=1;strokeWidth=2;fontSize=14;fontStyle=1;fillColor=#ffffff;strokeColor=#2d4357;verticalAlign=middle;strokeColor=#2563eb;strokeWidth=2;" vertex="1" parent="1">
<mxGeometry x="84.0" y="60.0" width="223.0" height="71.0" as="geometry"/>
</mxCell>
<mxCell id="n_verify" value="주입 검증&lt;br/&gt;조용한 실패 9건" tooltip="아무 일도 없었다와 영향이 없다를 가른다. | Evidence: L744-L752" style="whiteSpace=wrap;html=1;rounded=1;strokeWidth=2;fontSize=14;fontStyle=1;fillColor=#ffffff;strokeColor=#2d4357;verticalAlign=middle;strokeColor=#2563eb;strokeWidth=2;" vertex="1" parent="1">
<mxGeometry x="70.0" y="227.0" width="150.0" height="71.0" as="geometry"/>
<mxCell id="n_verify" value="주입 검증&lt;br/&gt;conntrack · PID 1 · kube-router" tooltip="아무 일도 없었다와 영향이 없다를 가른다. | Evidence: L744-L752" style="whiteSpace=wrap;html=1;rounded=1;strokeWidth=2;fontSize=14;fontStyle=1;fillColor=#ffffff;strokeColor=#2d4357;verticalAlign=middle;strokeColor=#2563eb;strokeWidth=2;" vertex="1" parent="1">
<mxGeometry x="70.0" y="227.0" width="251.0" height="71.0" as="geometry"/>
</mxCell>
<mxCell id="n_control" value="대조군 확보" tooltip="가장 자주 어겨졌고 가장 비쌌다. | Evidence: L744-L753" style="whiteSpace=wrap;html=1;rounded=1;strokeWidth=2;fontSize=14;fontStyle=1;fillColor=#ffffff;strokeColor=#2d4357;verticalAlign=middle;strokeColor=#d97706;fillColor=#fffdf5;" vertex="1" parent="1">
<mxGeometry x="70.0" y="394.0" width="150.0" height="64.0" as="geometry"/>
<mxGeometry x="120.5" y="394.0" width="150.0" height="64.0" as="geometry"/>
</mxCell>
<mxCell id="n_conclusion" value="결론" tooltip="세 단계를 거친 것만 남긴다. | Evidence: L744-L753" style="whiteSpace=wrap;html=1;rounded=1;strokeWidth=2;fontSize=14;fontStyle=1;fillColor=#ffffff;strokeColor=#2d4357;verticalAlign=middle;strokeColor=#2563eb;strokeWidth=2;" vertex="1" parent="1">
<mxGeometry x="70.0" y="554.0" width="150.0" height="64.0" as="geometry"/>
<mxGeometry x="120.5" y="554.0" width="150.0" height="64.0" as="geometry"/>
</mxCell>
<mxCell id="e_c-cn" value="귀속" style="edgeStyle=orthogonalEdgeStyle;rounded=0;orthogonalLoop=1;jettySize=auto;html=1;strokeWidth=2;endArrow=block;endFill=1;" edge="1" parent="1" source="n_control" target="n_conclusion">
<mxGeometry relative="1" as="geometry">
<mxPoint x="169.0" y="506.0" as="offset"/>
<mxPoint x="219.5" y="506.0" as="offset"/>
</mxGeometry>
</mxCell>
<mxCell id="e_p-v" value="주입 뒤" style="edgeStyle=orthogonalEdgeStyle;rounded=0;orthogonalLoop=1;jettySize=auto;html=1;strokeWidth=2;endArrow=block;endFill=1;" edge="1" parent="1" source="n_predict" target="n_verify">
<mxGeometry relative="1" as="geometry">
<mxPoint x="169.0" y="179.0" as="offset"/>
<mxPoint x="219.5" y="179.0" as="offset"/>
</mxGeometry>
</mxCell>
<mxCell id="e_v-c" value="관측 전" style="edgeStyle=orthogonalEdgeStyle;rounded=0;orthogonalLoop=1;jettySize=auto;html=1;strokeWidth=2;endArrow=block;endFill=1;" edge="1" parent="1" source="n_verify" target="n_control">
<mxGeometry relative="1" as="geometry">
<mxPoint x="169.0" y="346.0" as="offset"/>
<mxPoint x="219.5" y="346.0" as="offset"/>
</mxGeometry>
</mxCell>
</root>
docs/keycloak-session-store/final/assets/wrong-predictions/wrong-predictions.excalidraw
+20 -20
View File
@@ -6,7 +6,7 @@
{
"id": "edge-c-cn",
"type": "arrow",
"x": 145.0,
"x": 195.5,
"y": 458.0,
"width": 0.0,
"height": 96.0,
@@ -66,7 +66,7 @@
{
"id": "edge-label-c-cn",
"type": "text",
"x": 124.0,
"x": 174.5,
"y": 494.0,
"width": 90,
"height": 24,
@@ -105,7 +105,7 @@
{
"id": "edge-p-v",
"type": "arrow",
"x": 145.0,
"x": 195.5,
"y": 131.0,
"width": 0.0,
"height": 96.0,
@@ -165,7 +165,7 @@
{
"id": "edge-label-p-v",
"type": "text",
"x": 124.0,
"x": 174.5,
"y": 167.0,
"width": 90,
"height": 24,
@@ -204,7 +204,7 @@
{
"id": "edge-v-c",
"type": "arrow",
"x": 145.0,
"x": 195.5,
"y": 298.0,
"width": 0.0,
"height": 96.0,
@@ -264,7 +264,7 @@
{
"id": "edge-label-v-c",
"type": "text",
"x": 124.0,
"x": 174.5,
"y": 334.0,
"width": 90,
"height": 24,
@@ -303,9 +303,9 @@
{
"id": "node-predict",
"type": "rectangle",
"x": 70.0,
"x": 84.0,
"y": 60.0,
"width": 150.0,
"width": 223.0,
"height": 71.0,
"angle": 0,
"strokeColor": "#1e1e1e",
@@ -333,9 +333,9 @@
{
"id": "node-label-predict",
"type": "text",
"x": 80.0,
"x": 94.0,
"y": 70.0,
"width": 130.0,
"width": 203.0,
"height": 51.0,
"angle": 0,
"strokeColor": "#1e1e1e",
@@ -361,11 +361,11 @@
"locked": false,
"fontSize": 15,
"fontFamily": 5,
"text": "예측 선기록\n틀린 예측 5건",
"text": "예측 선기록\nA-1 · A-2 · A-6 · B-4 · B-6",
"textAlign": "center",
"verticalAlign": "middle",
"containerId": null,
"originalText": "예측 선기록\n틀린 예측 5건",
"originalText": "예측 선기록\nA-1 · A-2 · A-6 · B-4 · B-6",
"autoResize": true,
"lineHeight": 1.25
},
@@ -374,7 +374,7 @@
"type": "rectangle",
"x": 70.0,
"y": 227.0,
"width": 150.0,
"width": 251.0,
"height": 71.0,
"angle": 0,
"strokeColor": "#1e1e1e",
@@ -404,7 +404,7 @@
"type": "text",
"x": 80.0,
"y": 237.0,
"width": 130.0,
"width": 231.0,
"height": 51.0,
"angle": 0,
"strokeColor": "#1e1e1e",
@@ -430,18 +430,18 @@
"locked": false,
"fontSize": 15,
"fontFamily": 5,
"text": "주입 검증\n조용한 실패 9건",
"text": "주입 검증\nconntrack · PID 1 · kube-router",
"textAlign": "center",
"verticalAlign": "middle",
"containerId": null,
"originalText": "주입 검증\n조용한 실패 9건",
"originalText": "주입 검증\nconntrack · PID 1 · kube-router",
"autoResize": true,
"lineHeight": 1.25
},
{
"id": "node-control",
"type": "rectangle",
"x": 70.0,
"x": 120.5,
"y": 394.0,
"width": 150.0,
"height": 64.0,
@@ -471,7 +471,7 @@
{
"id": "node-label-control",
"type": "text",
"x": 80.0,
"x": 130.5,
"y": 404.0,
"width": 130.0,
"height": 44.0,
@@ -510,7 +510,7 @@
{
"id": "node-conclusion",
"type": "rectangle",
"x": 70.0,
"x": 120.5,
"y": 554.0,
"width": 150.0,
"height": 64.0,
@@ -540,7 +540,7 @@
{
"id": "node-label-conclusion",
"type": "text",
"x": 80.0,
"x": 130.5,
"y": 564.0,
"width": 130.0,
"height": 44.0,
docs/keycloak-session-store/final/assets/wrong-predictions/wrong-predictions.manifest.json
+1 -1
View File
@@ -2,7 +2,7 @@
"harness_version": "0.2.0",
"spec_id": "wrong-predictions",
"spec_version": "1.1",
"spec_sha256": "9afb114a63c78ec63e9c3dbafe7c902ccca77be9b9745ddebaf832f1ea2842cd",
"spec_sha256": "ee7306bc8147394b23e1f168c87fb6850ae92c54e8055b89252d584710fcc462",
"source_context": {
"document": "docs/keycloak-session-store/final/document.md",
"document_sha256": "1d44cba1905544d92f1d26ae36a8deb64a3db3914d6b488fd30d6ae7f8cfbabe",
docs/keycloak-session-store/final/assets/wrong-predictions/wrong-predictions.svg
+21 -21
View File
@@ -50,33 +50,33 @@
</style>
</defs>
<rect class="canvas" width="680" height="663" />
<polyline class="edge kind-request style-solid emphasis-normal" points="145.0,458.0 145.0,506.0 145.0,506.0 145.0,554.0" data-evidence="744-753" />
<rect class="edge-label-bg" x="147.0" y="492.0" width="44.0" height="22" rx="3" />
<text class="edge-label" x="169.0" y="507.0">귀속</text>
<polyline class="edge kind-request style-solid emphasis-normal" points="145.0,131.0 145.0,179.0 145.0,179.0 145.0,227.0" data-evidence="744-752" />
<rect class="edge-label-bg" x="146.6" y="165.0" width="44.8" height="22" rx="3" />
<text class="edge-label" x="169.0" y="180.0">주입 뒤</text>
<polyline class="edge kind-request style-solid emphasis-normal" points="145.0,298.0 145.0,346.0 145.0,346.0 145.0,394.0" data-evidence="744-752" />
<rect class="edge-label-bg" x="146.6" y="332.0" width="44.8" height="22" rx="3" />
<text class="edge-label" x="169.0" y="347.0">관측 전</text>
<polyline class="edge kind-request style-solid emphasis-normal" points="195.5,458.0 195.5,506.0 195.5,506.0 195.5,554.0" data-evidence="744-753" />
<rect class="edge-label-bg" x="197.5" y="492.0" width="44.0" height="22" rx="3" />
<text class="edge-label" x="219.5" y="507.0">귀속</text>
<polyline class="edge kind-request style-solid emphasis-normal" points="195.5,131.0 195.5,179.0 195.5,179.0 195.5,227.0" data-evidence="744-752" />
<rect class="edge-label-bg" x="197.1" y="165.0" width="44.8" height="22" rx="3" />
<text class="edge-label" x="219.5" y="180.0">주입 뒤</text>
<polyline class="edge kind-request style-solid emphasis-normal" points="195.5,298.0 195.5,346.0 195.5,346.0 195.5,394.0" data-evidence="744-752" />
<rect class="edge-label-bg" x="197.1" y="332.0" width="44.8" height="22" rx="3" />
<text class="edge-label" x="219.5" y="347.0">관측 전</text>
<g id="node-predict">
<rect class="node-shape kind-process emphasis-primary role-source" data-evidence="744-752" x="70.0" y="60.0" width="150.0" height="71.0" rx="7" />
<text class="node-label" x="145.0" y="87.0">예측 선기록</text>
<line class="node-detail-divider" x1="84.0" y1="108.0" x2="206.0" y2="108.0" />
<text class="node-detail" x="86.0" y="125.0">틀린 예측 5건</text>
<rect class="node-shape kind-process emphasis-primary role-source" data-evidence="744-752" x="84.0" y="60.0" width="223.0" height="71.0" rx="7" />
<text class="node-label" x="195.5" y="87.0">예측 선기록</text>
<line class="node-detail-divider" x1="98.0" y1="108.0" x2="293.0" y2="108.0" />
<text class="node-detail" x="100.0" y="125.0">A-1 · A-2 · A-6 · B-4 · B-6</text>
</g>
<g id="node-verify">
<rect class="node-shape kind-process emphasis-primary role-control" data-evidence="744-752" x="70.0" y="227.0" width="150.0" height="71.0" rx="7" />
<text class="node-label" x="145.0" y="254.0">주입 검증</text>
<line class="node-detail-divider" x1="84.0" y1="275.0" x2="206.0" y2="275.0" />
<text class="node-detail" x="86.0" y="292.0">조용한 실패 9건</text>
<rect class="node-shape kind-process emphasis-primary role-control" data-evidence="744-752" x="70.0" y="227.0" width="251.0" height="71.0" rx="7" />
<text class="node-label" x="195.5" y="254.0">주입 검증</text>
<line class="node-detail-divider" x1="84.0" y1="275.0" x2="307.0" y2="275.0" />
<text class="node-detail" x="86.0" y="292.0">conntrack · PID 1 · kube-router</text>
</g>
<g id="node-control">
<rect class="node-shape kind-process emphasis-warning role-control" data-evidence="744-753" x="70.0" y="394.0" width="150.0" height="64.0" rx="7" />
<text class="node-label" x="145.0" y="424.0">대조군 확보</text>
<rect class="node-shape kind-process emphasis-warning role-control" data-evidence="744-753" x="120.5" y="394.0" width="150.0" height="64.0" rx="7" />
<text class="node-label" x="195.5" y="424.0">대조군 확보</text>
</g>
<g id="node-conclusion">
<rect class="node-shape kind-component emphasis-primary role-target" data-evidence="744-753" x="70.0" y="554.0" width="150.0" height="64.0" rx="7" />
<text class="node-label" x="145.0" y="584.0">결론</text>
<rect class="node-shape kind-component emphasis-primary role-target" data-evidence="744-753" x="120.5" y="554.0" width="150.0" height="64.0" rx="7" />
<text class="node-label" x="195.5" y="584.0">결론</text>
</g>
</svg>
Side by Side Swipe Overlay

Before

Width:  |  Height:  |  Size: 6.6 KiB

After

Width:  |  Height:  |  Size: 6.6 KiB

docs/keycloak-session-store/final/document.md
+195 -197
View File
@@ -1,11 +1,12 @@
# 세션은 어디에 있는가 — Keycloak 다중 노드 실험 26건의 기록
Keycloak 을 두 대로 늘리면 세션은 어떻게 되는가. 저장소를 Redis 로 옮기면
무엇이 달라지는가. 저장소가 죽으면 어떻게 복구하는가.
Keycloak 을 두 대로 늘리면 세션은 어떻게 되고, 저장소를 Redis 로 옮기면
무엇이 달라지며, 그 저장소가 죽으면 어떻게 복구하는가. 이 문서는 그
물음들에 설계가 아니라 **측정으로** 답한 기록이다.
이 문서는 그 물음들에 **측정으로** 답한 기록이다. 실험 26건, 증거 파일 147개,
그리고 그 과정에서 **아홉 번의 조용한 주입 실패**와 **틀린 예측 다섯 개**를
포함한다. 틀린 것을 지우지 않고 남긴 이유는 마지막 절에 있다.
실험 26건과 증거 파일 147개가 들어 있고, 그 안에는 **아홉 번의 조용한 주입
실패**와 **틀린 예측 다섯 개**도 지우지 않고 남겨 두었다. 왜 지우지 않았는지는
마지막 절에서 따로 적는다.
---
@@ -14,8 +15,8 @@ Keycloak 을 두 대로 늘리면 세션은 어떻게 되는가. 저장소를 Re
### 답할 수 없던 질문 네 개
앞선 작업([인증 패턴 네 가지](../../keycloak/final/document.md))은 네 가지
인증 패턴의 경계를 설계하고 끝에 **열린 질문 네 개**를 남겼다. 설계로는
답할 수 없고 돌려봐야 아는 것들이었다.
인증 패턴의 경계를 설계한 뒤 끝에 **열린 질문 네 개**를 남겼다. 넷 다
설계로는 답이 나오지 않고 실제로 돌려봐야 아는 것들이었다.
| | 질문 |
|---|---|
@@ -24,47 +25,45 @@ Keycloak 을 두 대로 늘리면 세션은 어떻게 되는가. 저장소를 Re
| Q3 | BFF 의 Session 과 OAuth2AuthorizedClient 를 어디에 저장할 것인가 |
| Q4 | Forward-Auth 구조에서 Application Authorization 을 어디까지 Edge 에 둘 것인가 |
네 질문이 공유하는 전제가 하나 있다. **인스턴스가 둘 이상이고, 요청이 어느
쪽으로 갈지 모른다**는 것이다. 인스턴스가 하나면 이 질문들은 생기지 않는다.
그래서 인스턴스를 둘로 만들고, 그 사이를 끊어 보고, 저장소를 죽여 보는
실험대가 필요했다.
네 질문은 같은 전제 위에 서 있다. **인스턴스가 둘 이상이고, 요청이 어느
쪽으로 갈지 모른다**는 것인데, 인스턴스가 하나면 이 질문들은 애초에 생기지
않으므로 전제를 갖춘 환경이 먼저 있어야 했다. 그래서 인스턴스를 둘로 만들고
그 사이를 끊어 보고 저장소를 죽여 보는 실험대를 세웠다.
### 그런데 첫 실험에서 전제가 무너졌다
실험대를 세우고 가장 먼저 확인한 것은 「한 노드에서 만든 세션을 다른 노드가
쓸 수 있는가」였다. 답은 **그렇다**였다. 그런데 **그 이유가 예상과 달랐다.**
로그에는 클러스터가 형성됐다고 찍혀 있었다.
쓸 수 있는가」였고, 답은 **그렇다**였다. 그런데 **그렇게 되는 이유가 예상과
달랐다.** 로그만 보면 클러스터가 형성됐고 그것이 원인처럼 보인다.
```
ISPN000094: Received new cluster view for channel ISPN:
[keycloak-0-10001|1] (2) [keycloak-0-10001, keycloak-1-52537]
```
`JGROUPS_PING` 테이블에도 둘 다 등록되어 있었다. 그래서 「Infinispan 이
세션을 복제한다」고 읽기 쉽다. **아니었다.**
`JGROUPS_PING` 테이블에도 둘 다 등록되어 있으니 「Infinispan 이 세션을
복제한다」고 읽기 쉬운데, 확인해 보니 그렇지 않았다.
노드 A 로 로그인하고 노드 B 로 refresh 했을 때, **노드 B 가 PostgreSQL 로
노드 A 로 로그인하고 노드 B 로 refresh 했을 때 **노드 B 가 PostgreSQL 로
날린 SQL 을 문장 로깅으로 직접 잡았다.** 세션 엔트리는 노드 사이를 건너가지
않는다. 각 노드는 자기가 처리한 로그인만 캐시하고, 두 노드가 같은 답을
내놓는 이유는 **같은 데이터베이스를 보기 때문**이다.
않으며 각 노드는 자기가 처리한 로그인만 캐시하므로, 두 노드가 같은 답을
내놓는 이유는 복제가 아니라 **같은 데이터베이스를 보기 때문**이다.
![세션 공유가 실제로 지나는 경로](assets/session-sharing-path/session-sharing-path.svg)
두 노드는 `JGROUPS_PING` 으로 서로를 발견하고 클러스터 뷰를 만든다. 그러나
`sessions` 캐시 사이에는 경로가 없다. 같은 답이 나오는 것은 둘 다
두 노드는 `JGROUPS_PING` 으로 서로를 발견해 클러스터 뷰를 만들지만
`sessions` 캐시 사이에는 경로가 없어서, 같은 답이 나오는 것은 둘 다
`OFFLINE_USER_SESSION` 을 읽기 때문이다.
> **클러스터가 형성됐다는 것과 세션이 복제된다는 것은 다른 얘기였다.**
이 하나가 이후 실험 전체의 해석을 바꿨다. 「클러스터를 끊으면 세션 공유가
깨질 것」이라는 예측이 A-1 에서 빗나간 이유가 여기 있다.
이 하나가 이후 실험 전체의 해석을 바꿔 놓았다. 「클러스터를 끊으면 세션 공유가
깨질 것」이라는 예측이 A-1 에서 빗나간 이유도 여기에 있었다.
### 그리고 이 결론에는 버전 조건이 붙어 있었다
Keycloak 26 은 `persistent-user-sessions` 가 기본값이다. 세션을 DB 에 쓴다.
24 이전은 그렇지 않았다 — 메모리에 두고 Infinispan 으로 복제했다.
Keycloak 26 은 `persistent-user-sessions` 가 기본값이라 세션을 DB 에 쓰는데,
24 이전은 그렇지 않아서 메모리에 두고 Infinispan 으로 복제했다.
같은 실험을 `--features-disabled=persistent-user-sessions` 로 다시 돌리자
**세 결과가 정반대로 뒤집혔다.**
@@ -75,10 +74,10 @@ Keycloak 26 은 `persistent-user-sessions` 가 기본값이다. 세션을 DB 에
| A-8 · 롤링 재시작 후 refresh | `200` — 세션 생존 | `400 Session not active` — 전원 로그아웃 |
| A-2 · DB 정지 중 새 로그인 | `500` | `200` — 된다 |
**「Keycloak 은 이렇다」고 쓸 수 있는 문장이 거의 없다.** 버전과 설정을
같이 적지 않으면 절반은 틀린 말이 된다.
그래서 **「Keycloak 은 이렇다」고 쓸 수 있는 문장이 거의 없다.** 버전과
설정을 같이 적지 않으면 절반은 틀린 말이 되기 때문이다.
![같은 주입, 정반대 결과](assets/version-conditional-results/version-conditional-results.svg)
![설정에 따라 갈리는 세션의 거처](assets/version-conditional-results/version-conditional-results.svg)
설정 하나가 세션의 거처를 바꾸고, 그 거처가 장애 결과를 결정한다.
@@ -100,30 +99,27 @@ Keycloak 26 은 `persistent-user-sessions` 가 기본값이다. 세션을 DB 에
![실험대의 구성](assets/lab-topology/lab-topology.svg)
저장소가 kc-lab-2 한 곳에 몰려 있다. A-4 의 두 결과가 이 배치에서 갈린다.
저장소가 kc-lab-2 한 곳에 몰려 있어서 A-4 의 두 결과가 이 배치에서 갈린다.
이름 셋(`auth` · `app1` · `app2`)이 한 인증서의 SAN 에 들어 있다. 와일드카드가
아니다. 이 제약이 나중에 실제 비용을 청구한다 — oauth2-proxy 실험(B-7)을 할 때
이름 셋(`auth` · `app1` · `app2`)이 한 인증서의 SAN 에 들어 있고 와일드카드가
아닌데, 이 제약은 나중에 실제 비용을 청구했다. oauth2-proxy 실험(B-7)을 할 때
네 번째 이름이 없어 **Grafana 의 `app2` 를 빌려야 했다.**
### 게스트와 호스트의 sudo 가 다르다
kc-lab-1/2 는 무암호 sudo 라 `conntrack`·`tc`·`iptables` 를 자유롭게 썼다.
**호스트는 비밀번호를 요구한다.**
이 차이를 모르고 한동안 nginx 설정을 읽으려 했고, 계속 빈 결과가 나왔다.
**sudo 가 조용히 실패하고 있었다.** 「빈 로그」를 「아무 일도 없음」으로 읽을
뻔했다.
kc-lab-1/2 는 무암호 sudo 라 `conntrack`·`tc`·`iptables` 를 자유롭게 썼지만
**호스트는 비밀번호를 요구한다.** 이 차이를 모르고 한동안 nginx 설정을
읽으려 했는데 계속 빈 결과가 나왔고, **sudo 가 조용히 실패하고 있었다.**
하마터면 「빈 로그」를 「아무 일도 없음」으로 읽을 뻔했다.
호스트에서 해야 하는 일(인증서 강제 갱신, nginx reload)은 결국 **사람이 직접
쳐야** 했고, 그래서 D-4 는 「명령 한 줄을 헛되이 쓰지 않는 것」이 설계의
쳐야** 했으므로, D-4 에서는 「명령 한 줄을 헛되이 쓰지 않는 것」이 설계의
일부가 됐다.
### 주입이 먹지 않는다 — 아홉 번, 전부 조용히
이 실험대에서 가장 많은 시간을 쓴 곳이다. **주입이 실패하면 「아무 일도
없었다」로 보이고, 그것은 「영향이 없다」와 구별되지 않는다.**
이 실험대에서 가장 많은 시간을 쓴 곳인데, **주입이 실패하면 「아무 일도
없었다」로 보이고 그 모습은 「영향이 없다」와 구별되지 않기 때문이다.**
| # | 무엇을 했나 | 왜 안 먹었나 |
|---|---|---|
@@ -139,13 +135,13 @@ kc-lab-1/2 는 무암호 sudo 라 `conntrack`·`tc`·`iptables` 를 자유롭게
여기서 배운 규칙이 하나 있고, 이후 모든 실험에 적용했다.
> **주입했다는 것과 주입이 걸렸다는 것은 다른 사건이다.**
> **주입했다고 걸린 것이 아니다.**
> 주입 뒤에는 「대상이 실제로 그 상태인가」를 따로 확인한다.
> `cluster_size`, 워커 PID, conntrack 표, 패킷 카운터 — 결과가 아니라 상태를 본다.
![주입이 걸렸는지 따로 확인한다](assets/injection-verification/injection-verification.svg)
아홉 번의 실패가 전부 같은 자리에서 생겼다. 주입과 관측 사이가 비어 있었다.
아홉 번의 실패가 전부 같은 자리에서 생겼다 — 주입과 관측 사이가 비어 있었다.
---
@@ -154,14 +150,11 @@ kc-lab-1/2 는 무암호 sudo 라 `conntrack`·`tc`·`iptables` 를 자유롭게
### 관측을 어디에 둘 것인가
처음에는 밖에서만 쟀다. `curl` 로 외부 진입점을 찍고 상태 코드를 셌다.
**A-1 에서 그 방식이 무너졌다.**
7800 을 끊었는데 외부 응답이 전부 200 이었다. 장애가 없어서가 아니라
**분단된 노드가 readiness 실패로 스스로 로드밸런서에서 빠졌기** 때문이다.
밖에서만 보면 이 실험은 「아무 일도 없음」이다.
그래서 관측 지점을 셋으로 늘렸다.
처음에는 밖에서만 쟀다. `curl` 로 외부 진입점을 찍고 상태 코드를 셌는데
**A-1 에서 그 방식이 무너졌다.** 7800 을 끊었는데도 외부 응답이 전부 200
이었기 때문이다. 장애가 없어서가 아니라 **분단된 노드가 readiness 실패로
스스로 로드밸런서에서 빠졌기** 때문이었고, 밖에서만 보면 이 실험은 「아무
일도 없음」으로 끝난다. 그래서 관측 지점을 셋으로 늘렸다.
| 지점 | 무엇을 보는가 |
|---|---|
@@ -170,12 +163,12 @@ kc-lab-1/2 는 무암호 sudo 라 `conntrack`·`tc`·`iptables` 를 자유롭게
| PostgreSQL 직접 조회 | 실제로 무엇이 저장됐는가 |
`up` 지표를 신뢰할 수 없다는 것도 여기서 나왔다. A-2 에서 **503 이 나는
동안에도 `up` 은 1 이었다.** 프로세스가 살아 있고 `/metrics` 가 응답하면
`up` 은 1 이다. **「살아 있지만 쓸모없는」 상태를 못 본다.**
동안에도 `up` 은 1 이었는데**, 프로세스가 살아 있고 `/metrics` 가 응답하기만
하면 1 이 되므로 **「살아 있지만 쓸모없는」 상태를 못 보기 때문이다.**
![관측을 어디에 둘 것인가](assets/observation-points/observation-points.svg)
세 지점이 서로 다른 층을 본다. 하나만 두면 그 층의 사각이 그대로 사각으로 남는다.
세 지점이 서로 다른 층을 보기 때문에, 하나만 두면 그 층의 사각이 그대로 사각으로 남는다.
### 스크립트를 쓰지 않는다
@@ -183,13 +176,13 @@ kc-lab-1/2 는 무암호 sudo 라 `conntrack`·`tc`·`iptables` 를 자유롭게
절차를 스크립트로 감싸면 「무엇을 했는지」가 스크립트 안으로 숨는다.
그래서 모든 절차를 **셸에 그대로 붙여넣을 수 있는 명령**으로 적었다.
이 결정에는 대가가 있었다. 나중에 재현 절차를 점검하니 **측정 장치 자체가
산문으로 적힌 자리가 여럿** 있었다 — `( curl ... ) & 를 20개 띄우고 wait`
같은 것들이다. 22.2초라는 헤드라인 수치를 만든 부하 생성기가 실행 가능한
형태가 아니었다.
이 결정에는 대가가 따랐다. 나중에 재현 절차를 점검해 보니 `( curl ... ) &
를 20개 띄우고 wait` 처럼 **측정 장치 자체가 산문으로 적힌 자리가 여럿**
있었고, 22.2초라는 헤드라인 수치를 만든 부하 생성기부터가 실행 가능한 형태가
아니었다.
전부 셸 표현식으로 바꾸고 **실제로 돌려서 확인**했다. 그리고 그 확인에서
한 건이 깨졌다(위 표의 #9). 문법은 멀쩡했고 실행하면 조용히 실패했다.
전부 셸 표현식으로 바꾸고 **실제로 돌려서 확인**했더니 그 확인에서 한 건이
깨졌다(위 표의 #9). 문법은 멀쩡한데 실행하면 조용히 실패하는 종류였다.
> **「명령을 실행 가능하게 고쳤다」와 「고친 명령이 동작한다」는 다른 주장이다.**
@@ -199,27 +192,27 @@ kc-lab-1/2 는 무암호 sudo 라 `conntrack`·`tc`·`iptables` 를 자유롭게
### A층 — Keycloak 자체가 깨질 때
여덟 개 실험을 같은 모양으로 돌렸다. 예측을 **먼저 문서에 적고**, 주입하고,
관측하고, 예측과 대조했다.
여덟 개 실험을 같은 모양으로 돌렸다. 예측을 **먼저 문서에 적어 두고** 주입한
뒤 관측하고, 마지막에 그 예측과 대조하는 순서였다.
#### A-1 · JGroups 전송(TCP 7800) 차단
예측 둘 중 하나가 맞고 하나가 틀렸다.
예측을 둘 세웠고 하나는 맞고 하나는 틀렸다.
| 예측 | 결과 |
|---|---|
| 세션 공유는 안 깨진다 | **맞다.** 교차 노드 refresh 가 `200` |
| 로그아웃 전파는 안 깨진다 | **틀렸다.** `400` 이어야 할 것이 `200` |
세션은 DB 에 있으니 7800 과 무관하다. 그런데 **로그아웃 무효화 통지는 7800 을
탄다.** 끊으면 반대편 노드가 「이 세션은 죽었다」를 모른다.
세션은 DB 에 있으니 7800 과 무관한데, **로그아웃 무효화 통지는 7800 을 타기
때문에** 끊으면 반대편 노드가 「이 세션은 죽었다」를 알 방법이 없다.
NetworkPolicy 는 허용목록이라 「deny 7800」을 쓸 수 없다. 8080·9000 만 열고
7800 을 **누락시켜** 막는다.
NetworkPolicy 는 허용목록이라 「deny 7800」 같은 규칙을 쓸 수 없으므로,
8080·9000 만 열고 7800 을 **목록에서 빼는 방식으로** 막았다.
![발견과 전송은 다른 경로다](assets/a1-transport-vs-discovery/a1-transport-vs-discovery.svg)
발견은 DB 를, 전송은 7800 을 쓴다. 예측이 하나만 맞은 이유가 이 분기에 있다.
발견은 DB 를 쓰고 전송은 7800 을 쓴다 — 예측이 하나만 맞은 이유가 이 분기에 있다.
이 두 포트가 하중을 진다 — 9000(health·metrics)을
빠뜨리면 kubelet 이 파드를 죽여서 **분단이 아니라 죽은 Keycloak 을 재게 된다.**
@@ -238,16 +231,16 @@ A-3 이 이 실험대에서 가장 값진 숫자를 냈다.
★ 유실 : 4 건
```
**로그인이 성공했다고 응답받았는데 세션이 존재하지 않는다.** 버그가 아니다.
Keycloak 이 트랜잭션마다 `SET LOCAL synchronous_commit TO OFF` 를 건다.
**로그인이 성공했다고 응답받았는데 세션이 존재하지 않는다.** 버그는 아니고,
Keycloak 이 트랜잭션마다 `SET LOCAL synchronous_commit TO OFF` 를 걸기 때문에
COMMIT 이 WAL 디스크 기록을 기다리지 않고 즉시 반환한다. 그 사이(측정된
`wal_writer_delay` 200ms)에 죽으면 그만큼이 사라진다.
`wal_writer_delay` 200ms)에 프로세스가 죽으면 그만큼이 사라진다.
**의도된 설계이고, 그 대가를 숫자로 확인한 것이다.**
의도된 설계이므로, 이 실험은 그 대가가 얼마인지를 숫자로 확인했을 뿐이다.
![200 과 디스크 사이의 빈 구간](assets/a3-commit-to-disk-gap/a3-commit-to-disk-gap.svg)
성공 응답과 영속화가 다른 사건이다. RPO 가 0 이 아닌 이유가 그 사이에 있다.
성공 응답과 영속화가 다른 사건이어서, RPO 가 0 이 아닌 이유가 그 사이에 있다.
#### A-4 · 노드 상실 — 둘 다 전면 장애지만 이유가 다르다
@@ -259,10 +252,10 @@ COMMIT 이 WAL 디스크 기록을 기다리지 않고 즉시 반환한다. 그
| 원인 | **DB 가 같이 죽었다** | **들어갈 길이 없다** |
| 복구 | `virsh start` 이후 60초 | `virsh start` 이후 60초 |
4b 에서 keycloak-0 은 **계속 돌고 있었다.** 워크로드가 멀쩡한데 도달할 수 없어
장애다. **진입점이 단일 노드에 있으면 워크로드 이중화는 의미가 없다.**
4b 에서 keycloak-0 은 **계속 돌고 있었는데도** 도달할 수 없어서 장애였다.
**진입점이 단일 노드에 있으면 워크로드를 이중화해도 소용이 없다.**
그리고 예상하지 못한 것 셋이 나왔다.
그리고 예상하지 못한 것이 셋 더 나왔다.
1. **죽은 파드가 산 파드보다 건강해 보인다** — kubelet 이 사라져 상태가
갱신되지 않으니 `Running` 으로 남는다
@@ -275,21 +268,21 @@ COMMIT 이 WAL 디스크 기록을 기다리지 않고 즉시 반환한다. 그
![노드를 잃는 두 가지](assets/a4-two-node-losses/a4-two-node-losses.svg)
저장소 상실과 진입 경로 상실. 복구 시간이 같아도 대비가 다르다.
저장소 상실과 진입 경로 상실은 복구 시간이 같아도 대비하는 방법이 다르다.
#### A-5 · 비대칭 분단 — 전면 장애 경로가 없다
한 방향만 막으면 **열린 방향으로 재연결한다.** 가르지 못한다.
양방향을 다 막으면 갈라지지만 **한쪽만 DOWN** 이 된다 — 코디네이터 쪽이
살아남고, 분단된 쪽은 스스로 로드밸런서에서 빠지고, 서비스는 계속된다.
한 방향만 막으면 **열린 방향으로 재연결하므로** 클러스터가 갈라지지 않는다.
양방향을 다 막으면 갈라지기는 하는데 **한쪽만 DOWN** 이 되어서, 코디네이터
쪽이 살아남고 분단된 쪽은 스스로 로드밸런서에서 빠지며 서비스는 이어진다.
이 실험에서 주입을 세 번 실패했다(위 표의 #4·#5·#6). **세 번 모두 다른
이유였고, 셋 다 「아무 일도 없었다」로 보였다.**
![비대칭 차단은 가르지 못한다](assets/a5-partition-asymmetry/a5-partition-asymmetry.svg)
한 방향을 막는 것과 둘을 막는 것의 차이.
한 방향을 막을 때와 둘을 다 막을 때의 차이가 여기서 갈린다.
#### A-6 · 지연 주입 — 200밀리초가 22초가 된다
@@ -302,12 +295,12 @@ COMMIT 이 WAL 디스크 기록을 기다리지 않고 즉시 반환한다. 그
| 커넥션 획득 대기 최대 | 20,000 ms |
| readiness 프로브 | **타임아웃으로 실패** |
두 단계로 곱해진다. 로그인 한 번이 DB 왕복을 여러 번 하므로 **왕복 횟수만큼**
더해지고, 요청이 커넥션을 오래 붙들어 뒤의 요청이 풀에서 대기하므로
두 단계로 곱해지는데, 로그인 한 번이 DB 왕복을 여러 번 하므로 **왕복
횟수만큼** 더해지고 요청이 커넥션을 오래 붙들어 뒤의 요청이 풀에서 대기하므로
**거기서 한 번 더** 곱해진다.
그리고 파드가 죽는다. readiness 가 타임아웃으로 실패해 느린 노드가
로드밸런서에서 빠진다. **느림이 장애로 승격된다.**
마지막에는 파드가 죽는다. readiness 가 타임아웃으로 실패해 느린 노드가
로드밸런서에서 빠지므로, **느림이 그 자리에서 장애로 승격된다.**
![지연이 곱해지는 두 단계](assets/a6-latency-multiplication/a6-latency-multiplication.svg)
@@ -323,7 +316,7 @@ COMMIT 이 WAL 디스크 기록을 기다리지 않고 즉시 반환한다. 그
| DB 세션 수 | 151 → **151** 그대로 |
| 세션 캐시 | **0 으로 초기화** |
**이것이 `persistent-user-sessions` 를 켜는 진짜 이유다.**
`persistent-user-sessions` 를 켜는 진짜 이유가 여기에 있다.
![재시작이 지우는 것과 남기는 것](assets/a8-cache-vs-session/a8-cache-vs-session.svg)
@@ -346,11 +339,11 @@ select cscme1_0.SCOPE_ID from CLIENT_SCOPE_CLIENT cscme1_0
parameters: $1 = '131a9912-b578-4b9c-b16a-97518704077e', $2 = 'f'
```
`REVOKED_TOKEN` 은 한 번도 나오지 않는다. `DEFAULT_SCOPE='f'` 이므로
`REVOKED_TOKEN` 은 한 번도 나오지 않으며, `DEFAULT_SCOPE='f'` 이므로
**선택적 클라이언트 스코프** 조회다. refresh 는 새 access token 에 어떤
스코프를 담을지 다시 계산하고, 그 목록이 이 테이블에 있다.
스코프를 담을지 다시 계산하는데 그 목록이 이 테이블에 들어 있다.
더 중요한 것은 그 다음이다. **그 조회는 첫 refresh 에서 한 번만 일어나고
그 다음이 더 중요하다. **그 조회는 첫 refresh 에서 한 번만 일어나고
캐시된다.** 그래서 같은 설정이 캐시 온도만으로 세 가지 답을 낸다.
| 캐시 상태 | 로그인 | refresh | 실패한 SQL |
@@ -359,8 +352,8 @@ select cscme1_0.SCOPE_ID from CLIENT_SCOPE_CLIENT cscme1_0
| CLIENT 만 더움 ← A-7 이 본 것 | 200 | **500** | `CLIENT_SCOPE_CLIENT ...` |
| 완전히 더움 | 200 | **200** | 없음 (SQL 0건) |
셋 다 재현했다. **A-7 이 적은 「volatile 이면 DB 없이 로그인된다」도 조건부였다** —
냉시동에서는 클라이언트 조회조차 캐시에 없어 `400` 이다.
셋 다 재현해 보니 **A-7 이 적은 「volatile 이면 DB 없이 로그인된다」도
조건부였는데**, 냉시동에서는 클라이언트 조회조차 캐시에 없어 `400` 이 나온다.
> volatile 에서 DB 정지 시의 동작은 「무엇을 하느냐」가 아니라
> **「그 경로가 이미 캐시를 채웠느냐」** 로 결정된다.
@@ -368,7 +361,7 @@ select cscme1_0.SCOPE_ID from CLIENT_SCOPE_CLIENT cscme1_0
![캐시 온도가 결과를 가른다](assets/cache-temperature-outcomes/cache-temperature-outcomes.svg)
세 결과를 만드는 조회 두 개. 캐시가 그 조회를 삼키면 결과가 바뀐다.
세 결과를 만드는 것은 조회 두 개이고, 캐시가 그 조회를 삼키는 순간 결과가 바뀐다.
---
@@ -382,7 +375,7 @@ Boot) 두 인스턴스와 Redis, 그리고 oauth2-proxy 두 replica 를 올리
#### B-0 · 아무것도 설정하지 않으면 무엇이 선택되는가
저장소를 붙이기 **전에** 먼저 봤다. 추측으로 두면 안 되는 이유가 여기 있었다.
저장소를 붙이기 **전에** 먼저 들여다봤고, 추측으로 두면 안 되는 이유가 여기서 나왔다.
```
authorizedClientService → InMemoryOAuth2AuthorizedClientService
@@ -391,10 +384,9 @@ SessionRepository → 없음 (서블릿 컨테이너 in-memory)
Redis / Spring Session → 없음
```
둘째 줄이 핵심이다. **`AuthenticatedPrincipalOAuth2AuthorizedClientRepository`
는 principal 이름으로 찾는다. 조회 키에 session id 가 없다.**
그래서 서로 다른 것을 저장하는 두 개가 있다.
둘째 줄이 핵심인데, **`AuthenticatedPrincipalOAuth2AuthorizedClientRepository`
는 principal 이름으로 찾기 때문에 조회 키에 session id 가 없다.**
그래서 이름은 비슷해도 서로 다른 것을 저장하는 두 개가 따로 굴러간다.
| | 무엇을 담나 | 조회 키 |
|---|---|---|
@@ -405,22 +397,21 @@ Redis / Spring Session → 없음
![BFF 가 저장하는 두 가지와 그 조회 키](assets/bff-store-lookup-keys/bff-store-lookup-keys.svg)
같은 요청이 두 갈래로 조회된다. 세션은 세션 id 로, 토큰은 principal 이름으로.
그래서 B-1 에서 세션만 Redis 로 옮겼을 때 토큰이 따라오지 않았고, B-2 에서
같은 요청이 세션은 세션 id 로, 토큰은 principal 이름으로 두 갈래로 조회되기
때문에, B-1 에서 세션만 Redis 로 옮겼을 때 토큰이 따라오지 않았고 B-2 에서
따로 PostgreSQL 로 옮겨야 했다.
#### B-1 · 세션만 Redis 로 옮기면 — 반쪽만 옮겨진다
`SPRING_SESSION_STORE_TYPE=redis` 로 Application Session 을 Redis 로 옮겼다.
파드를 재시작해도 로그인이 유지된다. **그런데 토큰은 같이 살아남지 못했다.**
조회 키가 다르기 때문이다. 세션 저장소를 바꿔도 `OAuth2AuthorizedClient` 는
따라오지 않는다 — B-0 에서 확인한 그대로다.
`SPRING_SESSION_STORE_TYPE=redis` 로 Application Session 을 Redis 로 옮기자
파드를 재시작해도 로그인이 유지됐지만 **토큰은 같이 살아남지 못했다.**
조회 키가 다르므로 세션 저장소를 바꿔도 `OAuth2AuthorizedClient` 는 따라오지
않는다 — B-0 에서 확인한 그대로다.
#### B-2 · 저장소를 나눠 풀자 다른 두 문제가 남았다
토큰을 `JdbcOAuth2AuthorizedClientService` 로 PostgreSQL 에 옮겼다.
**Q3 가 말한 「각각 설계한다」의 실물이다.**
토큰은 `JdbcOAuth2AuthorizedClientService` 로 PostgreSQL 에 옮겼고,
이것이 **Q3 가 말한 「각각 설계한다」를 실제로 해 본 모습**이다.
| Q1 검증 | 결과 |
|---|---|
@@ -435,8 +426,8 @@ Redis / Spring Session → 없음
PRIMARY KEY (client_registration_id, principal_name)
```
**세션 id 가 키에 없다.** 같은 사용자의 두 세션이 같은 행을 쓰고, 나중
로그인이 앞의 토큰을 덮어쓴다. 그리고 로그아웃 후:
**세션 id 가 키에 없어서** 같은 사용자의 두 세션이 같은 행을 쓰게 되고,
나중 로그인이 앞의 토큰을 덮어쓴다. 로그아웃한 뒤에는 이렇게 남는다.
```
Redis 세션 : 0 키 ← 정리됨
@@ -445,7 +436,7 @@ PostgreSQL 토큰 : 1 행 ← 평문 refresh token 이 그대로 남는다
![덮어쓰기를 만드는 기본키](assets/b2-primary-key-overwrite/b2-primary-key-overwrite.svg)
저장소가 아니라 스키마가 원인이다.
저장소를 무엇으로 골랐느냐가 아니라 스키마가 원인이다.
#### B-3 · Refresh Token Rotation 경쟁 (Q2)
@@ -454,56 +445,57 @@ PostgreSQL 토큰 : 1 행 ← 평문 refresh token 이 그대로 남는다
으로 동시에 5건을 보냈다. 순차로 돌리면 재현되지 않는다 — `&` 와 `wait` 이
있어야 경합이 생긴다.
이긴 요청이 받은 **새 토큰조차 쓸 수 없다.** 경쟁이 감지되면 Keycloak 이
client session 을 지우기 때문이다. 「하나는 성공하고 나머지가 실패한다」가
아니라 **전부 못 쓰게 된다.**
경쟁이 감지되면 Keycloak 이 client session 을 지우기 때문에, 이긴 요청이 받은
**새 토큰조차 쓸 수 없다.** 「하나는 성공하고 나머지가 실패한다」가 아니라
**전부 못 쓰게 되는** 쪽이다.
![회전 경쟁에서 이긴 요청도 진다](assets/b3-rotation-contention/b3-rotation-contention.svg)
실패가 진 요청에만 오지 않는다. 재시도 설계가 여기서 갈린다.
실패가 진 요청에만 오는 것이 아니어서, 재시도를 어떻게 설계할지가 여기서 갈린다.
#### B-4 · Edge 인가의 범위 (Q4)
nginx → oauth2-proxy → 앱의 2홉 구조에서 헤더를 위조해 봤다.
예측이 틀렸다. **nginx 는 자기가 설정하지 않은 동명 헤더를 덮어쓰지 않는다.**
`proxy_set_header X-Auth-Request-Roles ""` 로 먼저 지우지 않으면 위조 헤더가
그대로 통과한다.
여기서도 예측이 틀렸다. **nginx 는 자기가 설정하지 않은 동명 헤더를
덮어쓰지 않기 때문에** `proxy_set_header X-Auth-Request-Roles ""` 로 먼저
지우지 않으면 위조 헤더가 그대로 통과한다.
그리고 **IdP 에서 값을 바꿔도 반영되지 않는다.** 12회 요청·6초 동안 옛 값이
갔고, Redis 세션을 지워 재인증시킨 뒤에야 새 값이 왔다.
> **세션은 로그인 시점의 스냅샷이다.** `--cookie-refresh` 가 없으면
> 쿠키 만료나 재인증까지 옛 값이 간다. 요청 횟수와 무관하다.
> **세션은 로그인 시점의 스냅샷이어서**, `--cookie-refresh` 가 없으면
> 요청을 몇 번 보내든 쿠키 만료나 재인증까지 옛 값이 그대로 간다.
![지우지 않으면 통과한다](assets/b4-header-trust-boundary/b4-header-trust-boundary.svg)
위조 경로와 정상 경로가 같은 헤더 이름을 쓴다. 지우는 단계가 없으면 구별할 수 없다.
위조 경로와 정상 경로가 같은 헤더 이름을 쓰므로, 지우는 단계가 없으면 둘을 구별할 수 없다.
#### B-5 · B-6 — 저장소 상실과 키 회전
B-5 에서 `redis-cli config set appendonly yes` 를 켜도 아무것도 달라지지
않았다. `/data` 가 컨테이너 파일시스템이라 컨테이너와 함께 죽는다.
**볼륨 없는 영속화 설정은 장식이다.**
않았는데, `/data` 가 컨테이너 파일시스템이라 컨테이너와 함께 죽기 때문이다.
**볼륨 없는 영속화 설정은 장식에 그친다.**
B-6 에서 realm 키를 회전하고 JWKS 캐시의 유예 구간을 기대했는데 **없었다.**
`NimbusJwtDecoder` 는 모르는 `kid` 를 만나면 JWKS 를 다시 가져온다.
![볼륨 없는 영속화와 유예 없는 회전](assets/b5-b6-storage-and-keys/b5-b6-storage-and-keys.svg)
설정과 매체를 분리해 보아야 한다. 설정만 보면 둘 다 되어 있는 것으로 읽힌다.
설정과 매체를 나눠서 보아야 한다. 설정만 보면 둘 다 되어 있는 것으로 읽히기 때문이다.
#### B-7 · B-7a — 쿠키에 담는 세션, 그리고 그 대가
oauth2-proxy 는 BFF 와 정반대다. **서버 상태가 없다.** 세션 전체가 쿠키에
있고 replica 는 같은 k8s Secret 을 읽을 뿐이다. 공유할 것이 없으니 콜백이
다른 replica 로 가도 된다.
oauth2-proxy 는 BFF 와 정반대로 **서버 상태를 갖지 않는다.** 세션 전체가
쿠키에 있고 replica 는 같은 k8s Secret 만 읽으므로, 공유할 것이 없어서 콜백이
다른 replica 로 가도 문제가 없다.
대신 **겹침 구간을 만들 수 없다.** `--cookie-secret` 은 단수다. 「옛 secret 도
당분간 받아준다」가 불가능하고, 교체하는 순간 모든 쿠키가 한꺼번에 무효가 된다.
대신 `--cookie-secret` 이 단수라서 **겹침 구간을 만들 수 없다.** 「옛 secret
도 당분간 받아준다」가 불가능하므로, 교체하는 순간 모든 쿠키가 한꺼번에 무효가
된다.
Redis 세션 저장소를 켜면 쿠키에는 티켓만 남는데, 그러면 문제의 성격이 바뀐다.
secret 을 바꾸면 티켓을 못 풀고, **티켓 안에 세션 id 가 있으므로 어느 Redis
@@ -530,21 +522,22 @@ TTL 이 요청으로 갱신되지 않으므로(`refresh:disabled`) **TTL 은 생
생성시각 = 지금 − (cookie-expire − TTL)
```
이 값이 회전 시각보다 이르면 고아다. 역산 `11:30:26` 대 로그의
`AuthSuccess 11:30:27` — **1초 오차.** 실제로 골라 지웠고 산 세션만 남았다.
이 값이 회전 시각보다 이르면 고아인데, 역산한 `11:30:26` 과 로그의
`AuthSuccess 11:30:27` 이 **1초 차**였다. 그 기준으로 실제로 골라 지웠고 산
세션만 남았다.
전제도 같이 적는다 — **`--cookie-refresh` 를 켜면 이 역산이 무너진다.**
그때는 `FLUSHDB` 로 전부 지우고 모두 재인증시키는 편이 정직하다.
![쿠키에 담으면 공유할 것이 없다](assets/b7-cookie-session-tradeoff/b7-cookie-session-tradeoff.svg)
쿠키 저장과 Redis 저장. 옮기는 순간 지울 수 없는 상태가 생긴다.
쿠키 저장과 Redis 저장을 나란히 두면, 옮기는 순간 지울 수 없는 상태가 생기는 것이 보인다.
### C층 — SSO 와 로그아웃 전파
C-1 에서 두 앱이 같은 realm 으로 SSO 되는 것을 확인했고, 로그아웃이 다른
앱으로 퍼지지 않는 것을 관측했다. C-2 가 그 원인을 봤는데 단순했다.
C-1 에서 두 앱이 같은 realm 으로 SSO 되는 것을 확인하면서 로그아웃이 다른
앱으로 퍼지지 않는 것도 함께 관측했고, C-2 에서 들여다본 원인은 단순했다.
| 확인 | 결과 |
|---|---|
@@ -553,19 +546,19 @@ C-1 에서 두 앱이 같은 realm 으로 SSO 되는 것을 확인했고, 로그
| IdP 쪽만 설정하면 되는가 | **★ 안 된다.** 앱 세션이 그대로 남았다 |
| Keycloak 이 앱 URL 에 닿기는 하는가 | 닿는다 (`HTTP 200`) — 네트워크 문제가 아니다 |
**아무도 구현하지 않았다.** 그리고 「설정이 빠졌다」와 「기능이 없다」는 다르게
고쳐야 한다. 여기는 둘 다였고, 확인 순서를 바꿨다면 한쪽만 고치고 끝냈을 것이다.
**아무도 구현하지 않았다.** 그리고 「설정이 빠졌다」와 「기능이 없다」는 고치는
방법이 다른데 여기는 둘 다였으므로, 확인 순서를 바꿨다면 한쪽만 고치고 끝냈을지도 모른다.
![백채널 로그아웃은 양쪽이 있어야 한다](assets/c2-backchannel-both-sides/c2-backchannel-both-sides.svg)
IdP 쪽 결손과 앱 쪽 결손이 한 경로 위에 있다. 하나만 고치면 여전히 안 된다.
IdP 쪽 결손과 앱 쪽 결손이 한 경로 위에 있어서, 하나만 고쳐서는 여전히 되지 않는다.
### D층 — 운영
#### D-1 · D-2 — 백업과 업그레이드
D-2 에서 26.7.0 → 26.7.3 은 **무중단**이었다(87회 요청 전부 200). 되돌리기는
D-2 에서 26.7.0 → 26.7.3 은 **무중단**이었지만(87회 요청 전부 200) 되돌리기는
**막혔다.**
```
@@ -576,34 +569,35 @@ liquibase ValidationFailedException: 1 changesets check sum
StatefulSet 롤링 업데이트가 첫 파드에서 멈추고 나머지를 건드리지 않았기
때문이다. **「롤백 계획」이 없어도 사고가 전면화되지 않았다.**
이 결론은 나중에 정밀해졌다. **「롤백 불가」는 조건부다** — 스키마가 움직였을
때만이고, 판단 기준은 하나다.
이 결론은 나중에 더 정밀해졌다. **「롤백 불가」는 조건부여서** 스키마가
움직였을 때만 해당하며 판단 기준도 하나로 정해진다.
```sql
select count(*) from databasechangelog
```
업그레이드 전후 이 수가 같으면 롤백된다. 늘었으면 안 된다. 26.7.3 → 26.7.0
을 스키마 변경 없이 되돌리는 것은 **실제로 성공했다**(전환 순간 `000` 1회).
업그레이드 전후로 이 수가 같으면 롤백이 되고 늘었으면 안 되는데, 26.7.3 →
26.7.0 을 스키마 변경 없이 되돌리는 것은 **실제로 성공했다**(전환 순간
`000` 1회).
![방향에 따라 갈리는 업그레이드](assets/d2-upgrade-direction/d2-upgrade-direction.svg)
체크섬 검증은 막고, 롤링 업데이트는 피해를 줄인다.
체크섬 검증은 되돌리기를 막고, 롤링 업데이트는 그 사고의 피해를 줄인다.
#### D-3 · 비밀
`kubectl get secret -o yaml` 의 base64 는 암호화가 아니다. etcd 에 평문으로
있다. 파드 안에서 `env | grep -i secret` 이면 그대로 나온다.
`kubectl get secret -o yaml` 의 base64 는 암호화가 아니라 인코딩이므로 etcd
에는 평문으로 있고, 파드 안에서 `env | grep -i secret` 을 치면 그대로 나온다.
![base64 는 암호화가 아니다](assets/d3-secret-exposure/d3-secret-exposure.svg)
인코딩과 암호화는 다르다. 두 경로 모두 끝이 평문이다.
인코딩과 암호화는 다르고, 드러나는 두 경로 모두 끝이 평문이다.
#### D-4 · D-4a — 인증서, 그리고 이 실험대 최대의 발견
계획서의 물음은 「nginx reload 중 진행 중이던 요청은 어떻게 되는가」였다.
계획서의 물음은 「nginx reload 중 진행 중이던 요청은 어떻게 되는가」였고,
답하기 전에 **대조군부터** 잡았다.
| 대조군 | 결과 |
@@ -611,10 +605,10 @@ select count(*) from databasechangelog
| 새 연결 (0.2초 × 900회 / 180초) | **900 전부 200, 오류 0** · 중앙 98ms · p95 195ms |
| 진행 중 요청 (845KB @ 20k/s) | 200 · 845361바이트 · 연결수 1 · 42.3초 완주 |
두 번째가 왜 필요했는가 — 첫 폴링은 **TLS 핸드셰이크가 900/900** 이다.
매 요청이 새 연결이라는 뜻이고, 그래서 「새 연결을 받아주는가」만 잰다.
두 번째가 왜 필요했는가 하면, 첫 폴링은 **TLS 핸드셰이크가 900/900** 이라
매 요청이 새 연결이고 그래서 「새 연결을 받아주는가」만 재기 때문이다.
계획서가 물은 것은 **「진행 중이던 요청」** 이므로 reload 순간에 실제로
전송 중인 요청이 있어야 한다. 845KB 짜리 번들을 일부러 느리게 받아 요청
전송 중인 요청이 있어야 했다. 845KB 짜리 번들을 일부러 느리게 받아 요청
하나를 42초 동안 살려 두었다.
그리고 강제 갱신을 했더니 — **인증서가 바뀌지 않았다.**
@@ -630,10 +624,11 @@ select count(*) from databasechangelog
| 실제 서빙 시작 (`nginx -s reload`) | 08:58:52 |
| **공백** | **2305초 = 38분 25초** (그 사이 428회 관측) |
그 38분은 **우연히 짧았을 뿐이다.** reload 를 시킨 것은 사람이지 자동화가
아니다. 아무도 안 했다면 다음 nginx 재시작까지 — 사실상 무기한이었다.
그 38분은 **우연히 짧았을 뿐인데**, reload 를 시킨 것이 자동화가 아니라
사람이었기 때문이다. 아무도 치지 않았다면 다음 nginx 재시작까지, 사실상
무기한으로 옛 인증서가 나갔을 터였다.
원인이 셋 겹쳤고 **전부 비어 있었다.**
원인이 셋 겹쳤고 **셋 다 비어 있었다.**
| | 상태 |
|---|---|
@@ -641,9 +636,9 @@ select count(*) from databasechangelog
| `/etc/letsencrypt/renewal-hooks/{deploy,post,pre}/` | **셋 다 비었음** |
| certbot 의 nginx 플러그인 | 없음 (`dns-cloudflare, manual, null, standalone, webroot`) |
nginx 는 인증서를 기동 시점에 읽어 메모리에 들고 있다. certbot 은 경로가
아니라 `live/` 심볼릭 링크를 갈아끼운다. **설정은 멀쩡해 보이는데 서빙되는
것은 옛 것이다.** 필요한 것은 설정 변경이 아니라 reload 다.
nginx 는 인증서를 기동 시점에 읽어 메모리에 들고 있는데 certbot 은 경로가
아니라 `live/` 심볼릭 링크를 갈아끼우므로, **설정은 멀쩡해 보이는데 옛
인증서가 나간다.** 설정을 고칠 일이 아니라 reload 를 걸 일이다.
![인증서 갱신이 서빙에 닿기까지](assets/renewal-to-serving-gap/renewal-to-serving-gap.svg)
@@ -652,7 +647,8 @@ nginx 는 인증서를 기동 시점에 읽어 메모리에 들고 있다. certb
괜찮다」고 착각하기 쉽다. 필요한 것은 설정 변경이 아니라 reload 이며,
그 reload 를 부르는 자리가 이 실험대에서는 셋 다 비어 있었다.
판정 방법도 여기서 나왔다 — **마스터 PID 유지 + 워커 PID 교체 = reload.**
reload 가 실제로 일어났는지 가리는 방법도 여기서 나왔다.
**마스터 PID 는 유지되고 워커 PID 만 바뀌면 reload 된 것**이다.
```
585 1 80529 Thu Sep 3 19:00:39 nginx: master process
@@ -661,10 +657,10 @@ nginx 는 인증서를 기동 시점에 읽어 메모리에 들고 있다. certb
워커가 마스터 기동 직후의 첫 fork(585→586) 그대로 22.4시간째다.
**가장 고약한 것은 이 결함이 88일간 보이지 않는다는 점이다.** 타이머는 정상이고
매번 `SUCCESS` 로 끝난다. 만료 30일 전까지 갱신 자체를 하지 않아 발현할
기회가 없고, 발현하는 날의 증상은 **인증서 만료**다. 그날에도 로그는
`SUCCESS` 라고 적혀 있다.
**이 결함은 88일 동안 드러나지 않는다.** 타이머는 정상이고 매번 `SUCCESS` 로
끝나는데, 만료 30일 전까지는 갱신 자체를 하지 않아 발현할 기회가 없기
때문이다. 발현하는 날의 증상은 **인증서 만료**이고, 그날에도 로그에는
`SUCCESS` 라고 적혀 있을 것이다.
D-4a 에서 처방(`deploy/` 훅 하나)을 실제로 넣고 검증했다.
@@ -673,18 +669,18 @@ D-4a 에서 처방(`deploy/` 훅 하나)을 실제로 넣고 검증했다.
| 갱신 → 서빙 | 2305초 = 38분 25초 | **1~2초** |
| 무엇이 reload 했나 | 사람 | certbot deploy 훅 |
함정이 하나 더 있었다. certbot 이 `Hook 'deploy-hook' ran with error output`
이라고 찍는데 **실패가 아니다.** nginx 의 `types_hash` 경고가 stderr 로
나갔을 뿐이고 내용은 `test is successful` · `signal process started` 다.
여기에도 함정이 하나 더 있었다. certbot 이 `Hook 'deploy-hook' ran with error output`
이라고 찍지만 **실패는 아니고**, nginx 의 `types_hash` 경고가 stderr 로 나갔을
뿐이어서 내용은 `test is successful` · `signal process started` 다.
**로그에서 `error` 를 grep 하는 감시를 걸면 성공한 훅을 실패로 오독한다.**
reload 자체는 무중단이었다 — 새 연결 **8856건 전부 200**, p95 205.7 → 204.3ms.
그리고 전송 12초째에 reload 를 맞은 42초짜리 요청이 **845361바이트를 온전히**
받았다(연결수 1). 옛 워커가 그 요청을 끝까지 책임졌다.
받았다(연결수 1). 옛 워커가 그 요청을 끝까지 책임졌기 때문이다.
![훅 하나가 만드는 차이](assets/d4a-hook-effect/d4a-hook-effect.svg)
훅의 유무가 만드는 차이. 판정은 로그 문구가 아니라 워커 PID 로 한다.
훅이 있고 없고가 이 차이를 만든다 — 판정은 로그 문구가 아니라 워커 PID 로 한다.
---
@@ -697,14 +693,16 @@ reload 자체는 무중단이었다 — 새 연결 **8856건 전부 200**, p95 2
#### 대조군 없이는 아무것도 귀속할 수 없다
D-4 에서 갱신 중 비200 이 한 번 나왔다고 하자. **평시 오류율을 모르면 그게
갱신 탓인지 알 수 없다.** 그래서 주입 전에 900건을 재서 오류 0을 확인했다.
D-4 에서 갱신 중 비200 이 한 번 나왔다고 하면, **평시 오류율을 모르는 채로는
그게 갱신 탓인지 알 수 없다.** 그래서 주입 전에 900건을 재서 오류가 0 이라는
것부터 확인해 두었다.
이 규칙을 어긴 사례가 이미 있었다. A-6 에서 **−41% 인 대조군을 「영향 없음」**
이라고 적었고, A-8 에서 **표본 9개로 무중단을 주장**했다. 둘 다 나중에 고쳤다.
이 규칙을 어긴 사례가 이미 있었다. A-6 에서 **−41% 인 대조군을 「영향
없음」** 이라고 적었고 A-8 에서는 **표본 9개로 무중단을 주장**했다. 둘 다
나중에 고쳤다.
가장 최근 사례는 D-4 의 in-flight 감시다. 76건이 실패했고 그대로 적었으면
「갱신 중 대규모 요청 실패」라는 오보가 됐을 것이다. 서버 탓이 아니었다.
「갱신 중 대규모 요청 실패」라는 오보가 됐을 것이다. 확인해 보니 서버 탓이 아니었다.
| 근거 | 값 |
|---|---|
@@ -713,17 +711,17 @@ D-4 에서 갱신 중 비200 이 한 번 나왔다고 하자. **평시 오류율
| 소요 시간 | **50µs** — DNS 조회보다 짧다 |
| 재현 | **0/100** |
**대조군이 오보를 막았다.**
대조군이 있었기에 오보를 내지 않을 수 있었다.
![대조군 없이는 귀속할 수 없다](assets/measurement-control/measurement-control.svg)
대조군이 관측과 귀속 사이에 있다. 그 자리가 비면 같은 관측이 두 가지로 읽힌다.
대조군이 관측과 귀속 사이에 있어서, 그 자리가 비면 같은 관측이 두 가지로 읽힌다.
#### 두 시계에서 온 값을 빼면 안 된다
D-4a 에서 1~2초를 재려다 걸렸다. `test-server` 는 NTP 가 꺼져 있고
**106초 빠르다.** dev 머신은 Google 및 Let's Encrypt ACME 응답과 0초 차다.
D-4a 에서 1~2초를 재려다 걸렸다. `test-server` 는 NTP 가 꺼져 있어
**106초 빠른** 반면 dev 머신은 Google 및 Let's Encrypt ACME 응답과 0초 차였다.
그 사실을 적지 않고 계산한 D-4 의 공백은 **106초 짧았다**(2199 → 2305초).
그리고 1~2초를 재는 D-4a 에서는 보정 없이는 **훅이 인증서 발급보다 104초
@@ -732,7 +730,7 @@ D-4a 에서 1~2초를 재려다 걸렸다. `test-server` 는 NTP 가 꺼져 있
보정은 독립 기준으로 교차검증했다 — 새 인증서의 SCT(`Sep 4 12:27:49.054 GMT`,
CT 로그가 자체 시계로 서명)가 보정한 훅 시각의 정확히 1초 앞에 놓인다.
> **자릿수가 아니라 방향까지 틀릴 수 있다.**
> 두 시계에서 온 값을 그냥 빼면 **자릿수가 아니라 방향까지 틀릴 수 있다.**
#### 관측 도구는 진실의 부분집합만 본다
@@ -742,9 +740,9 @@ CT 로그가 자체 시계로 서명)가 보정한 훅 시각의 정확히 1초
| crt.sh | 서빙 중인 인증서에 **SCT 가 두 개 박혀 있는데도 0건**으로 답한다 |
| Prometheus | **Redis·BFF·PostgreSQL 을 아예 긁지 않는다** |
마지막 것 때문에 **B층 실험 대부분에 Grafana 스크린샷이 없다.** 안 찍은 것이
아니라 지표가 없다. 이 사실을 「스크린샷 누락」으로 적지 않고 **측정된 공백**
으로 기록했다.
마지막 것 때문에 **B층 실험 대부분에 Grafana 스크린샷이 없는데**, 안 찍어서가
아니라 지표 자체가 없어서다. 그래서 이 사실을 「스크린샷 누락」이 아니라
**측정된 공백**으로 기록했다.
#### 문서가 자기 증거와 어긋나는 자리
@@ -759,13 +757,13 @@ CT 로그가 자체 시계로 서명)가 보정한 훅 시각의 정확히 1초
| A-3 | `wal_writer_delay` 를 재지 않고 단언했다 (실측 200ms, 로그인율도 19/s 가 아니라 14/s) |
| D-1 | 본문은 RTO 30초, 자기 타임라인은 41초 |
전부 고쳤고, **무엇이 어긋났는지를 표로 남겼다.** 지우면 다음 사람이 같은
방식으로 틀린다.
전부 고치면서 **무엇이 어긋났는지를 표로 남겼다.** 지워 버리면 다음 사람이
같은 방식으로 틀리기 때문이다.
### 재현 가능성을 어떻게 보장했나
절차를 명령으로 적는 것만으로는 부족했다. **측정 장치 자체가 산문인 자리**가
남아 있었고, 그것들은 헤드라인 수치를 만든 바로 그 명령이었다.
남아 있었는데, 하필 그것들이 헤드라인 수치를 만든 바로 그 명령이었다.
| 어디 | 산문이던 것 |
|---|---|
@@ -780,7 +778,7 @@ CT 로그가 자체 시계로 서명)가 보정한 훅 시각의 정확히 1초
![명령으로 적는 것과 도는 것](assets/reproducibility-gap/reproducibility-gap.svg)
산문에서 명령으로, 명령에서 실행 확인으로. 두 번째 단계에서 한 건이 깨졌다.
산문에서 명령으로, 다시 실행 확인으로 두 단계를 거쳤고 두 번째에서 한 건이 깨졌다.
---
@@ -798,7 +796,7 @@ CT 로그가 자체 시계로 서명)가 보정한 훅 시각의 정확히 1초
![열린 질문 네 개가 닿은 곳](assets/open-questions-answered/open-questions-answered.svg)
네 질문이 공통 원인으로 모인다. 저장소 선택으로 풀리지 않는 것들이 한자리에 있다.
네 질문이 공통 원인으로 모이면서, 저장소 선택만으로는 풀리지 않는 것들이 한자리에 드러난다.
### 이 기록이 적용되지 않는 조건
@@ -831,28 +829,28 @@ CT 로그가 자체 시계로 서명)가 보정한 훅 시각의 정확히 1초
| 틀린 예측 | 실제 |
|---|---|
| A-1 로그아웃 전파는 안 깨진다 | 깨졌다 — A-0 의 인과 설명을 고쳐야 했다 |
| A-2 `up` 이 장애를 보여줄 것이다 | 503 내내 1이었다 |
| A-6 낙관적 락 충돌이 보일 것이다 | 0건 — 로그인은 INSERT 라 경합하지 않는다 |
| B-4 nginx 가 동명 헤더를 덮어쓸 것이다 | 덮어쓰지 않는다 |
| B-6 JWKS 캐시가 유예를 줄 것이다 | 주지 않는다 |
| A-2 `up` 이 장애를 보여준다 | 503 내내 1이었다 |
| A-6 낙관적 락 충돌이 보인다 | 0건 — 로그인은 INSERT 라 경합하지 않는다 |
| B-4 nginx 가 동명 헤더를 덮어쓴다 | 덮어쓰지 않는다 |
| B-6 JWKS 캐시가 유예를 준다 | 주지 않는다 |
| A-7 refresh 500 은 `REVOKED_TOKEN` 때문 | `CLIENT_SCOPE_CLIENT` 였다 |
**틀린 예측이 맞은 예측보다 많은 것을 가르쳤다.** A-1 이 틀리지 않았다면
A-0 의 인과 설명이 잘못된 채로 남았을 것이고, A-7 의 가설이 확정되지 않았다면
「volatile 이면 이렇다」는 표가 조건 없이 유통됐을 것이다.
**틀린 예측이 맞은 예측보다 많은 것을 가르쳤는데**, A-1 이 틀리지 않았다면
A-0 의 인과 설명이 잘못된 채로 남았을 것이고 A-7 의 가설이 확정되지 않았다면
「volatile 이면 이렇다」는 표가 조건 없이 유통됐을 것이기 때문이다.
그래서 이 기록의 규칙은 셋이다.
그래서 이 기록을 쓰면서 지킨 규칙은 셋이다.
1. **예측을 먼저 적는다.** 결과를 보고 나면 무엇을 예상했는지 정직하게 쓸 수 없다
2. **주입이 걸렸는지를 결과와 따로 확인한다.** 「아무 일도 없었다」는
「영향이 없다」와 구별되지 않는다
3. **대조군 없이 귀속하지 않는다.** 평시를 모르면 이상을 해석할 수 없다
세 번째가 가장 자주 어겨졌고, 가장 비쌌다.
세 번째가 가장 자주 어겨졌고 치른 값도 가장 컸다.
![틀린 예측이 남긴 것](assets/wrong-predictions/wrong-predictions.svg)
세 규칙을 순서로 놓았다. 각 단계가 빠졌을 때 어떻게 틀리는지가 실제 이력이다.
세 규칙을 순서대로 놓으면, 각 단계가 빠졌을 때 어떻게 틀리는지가 실제 이력으로 남는다.
---
@@ -871,7 +869,7 @@ A-0 의 인과 설명이 잘못된 채로 남았을 것이고, A-7 의 가설이
| 로드맵 | [`../source/docs/experiment-plan.md`](../source/docs/experiment-plan.md) — 실험별 예측·판정 규칙 |
| 개념 | [`../source/docs/session-lab-concepts.md`](../source/docs/session-lab-concepts.md) · [`../source/docs/session-lab-prerequisites.md`](../source/docs/session-lab-prerequisites.md) |
원본 저장소 리비전은 [`../source/.source-revision`](../source/.source-revision) 에 있다.
원본 저장소의 리비전은 [`../source/.source-revision`](../source/.source-revision) 에 적어 두었다.
---
@@ -881,7 +879,7 @@ A-0 의 인과 설명이 잘못된 채로 남았을 것이고, A-7 의 가설이
**그림은 28건 모두 techviz 로 다시 만들었다.** 원본 저장소의 손그림 28개는
[`../source/docs/diagrams/`](../source/docs/diagrams/) 에 그대로 있다.
형식 변환이 아니라 다시 그린 것이다. 이 저장소는 발행 SVG 안에 제목·부제·
형식만 바꾼 것이 아니라 처음부터 다시 그렸다. 이 저장소는 발행 SVG 안에 제목·부제·
설명 밴드를 넣지 못하게 하는데 손그림은 전부 캔버스 안에 제목과 설명 문단을
담고 있었다. 그래서 그림 안에는 이름만 남기고 문장은 `<desc>` 와 옆 문단으로
옮겼으며, 각 그림마다 문서의 줄 범위를 인용하는 VizSpec 을 쓰고 lint 를
@@ -897,5 +895,5 @@ lint 가 잡아낸 것 중 사람이 놓치기 쉬운 것 둘을 적어 둔다.
두 번째 때문에 그림 하나는 앵커를 옮겨야 했다. B-0 절에 앵커를 두고 B-2 의
내용을 인용하려다 막혔고, B-1 로 옮겨 세 절이 문맥에 들어오게 했다.
**Studio 기록은 아직 쓰지 않았다.** 이 문서까지가 SSOT 이고,
`tech-log-studio/` 아래 글감 추출과 기록 작성은 다음 단계다.
**Studio 기록은 아직 쓰지 않았다.** 이 문서까지가 SSOT 이고
`tech-log-studio/` 아래 글감 추출과 기록 작성은 다음 단계이기 때문이다.