main / main-check (push) Successful in 8m35s
옮겨 온 문서는 템플릿 안의 family를 전제로 쓰였다. 루트 지침은
하네스 뼈대의 빈 양식이고, 모듈 지침·제품 문서는 템플릿 경로
(src/platforms/messaging, src/config/…, cd src)와 템플릿 소비자
(app-bootstrap, adapter:*, composition:*)를 이 repo 안의 것처럼 부른다.
- AGENTS.md(38줄)·CLAUDE.md: 꼭 지킬 것 일곱(api 모듈 순수성, 템플릿
타입·경로 금지, 배포 버전·적용된 migration 불변, 인증 manifest 손으로
고치지 않기 등), 지도, 맡은 일, 검증 진입점.
- README.md: 받는 법(exclusiveContent dev.cakit), migration 위치, 지원 표
(Boot 4.0.9, kafka-clients 4.1.2, apache/kafka:4.1.0, PostgreSQL 16,
Java 21), 구조, 문서 지도, 서명 공개 키(지문 …A1C936D7F791F8AB,
grpc-library와 같은 키), 이력(템플릿 2959eff0에서 filter-repo).
- CHANGELOG.md: 1.0.0 절과 템플릿 안 코드에서 옮기는 법(패키지,
Kafka 설정 키, Gradle 좌표, 바뀌지 않는 것).
- docs/README.md, docs/work/{README,gates,release}.md,
docs/problem-statement.md: grpc-library와 같은 모양으로, 메시징의
인증 증거 게이트·migration 규칙·템플릿과 같이 고치는 경로를 넣었다.
docs/vision.md는 소유자가 쓸 자리라 비워 둔다.
- messaging/AGENTS.md, docs/messaging/*, starter README: registry 경로를
이 repo 기준으로, 템플릿 쪽 경로·타입은 「백엔드 템플릿의」로 밝혔다.
시험이 읽는 문장(지원 표의 broker·버전, 설정 참조의 YAML)은 바꾸지
않았다.
검증: scripts/verify.sh docs rc=0(vision.md 자리 알림만). desktop
mainCheck는 이 커밋 직전 트리에서 rc=0이었다. 문서가 시험에 읽히는
부분은 다음 desktop 실행으로 다시 본다.
Refs: design-docs repo-structure/05-library-repos.md 14.2절
155 lines
9.7 KiB
Markdown
155 lines
9.7 KiB
Markdown
# Messaging 지원 매트릭스
|
|
|
|
플랫폼이 **무엇을 보장하는지**와 **무엇을 보장하지 않는지**를 브로커별로 고정한다.
|
|
여기 없는 조합은 지원되지 않는다.
|
|
|
|
> **등급은 증거를 따른다.** `CompatibilityMatrix.Entry.hasLiveBrokerCertification()`은 선언된
|
|
> boolean이 아니라 `CertifiedEvidence`가 가진 레인 증거에서 파생된다. 레인이 생겨 증거를 내면 등급은
|
|
> 코드 수정 없이 따라 올라간다.
|
|
|
|
> **삭제된 어댑터.** RabbitMQ(선택할 수 없던 validator·설정 모음), Pulsar·NATS JetStream·Kafka Share
|
|
> Group(Experimental, SDK 없는 seam), Spring Cloud Stream bridge, Debezium outbox 매핑은 2026-09-25에
|
|
> 삭제했다. 복구 경로는 백엔드 템플릿 `docs/capability-status.md`의 제거 표에 있다.
|
|
|
|
> **인증 근거.** 이 표의 버전은 이 저장소의 컨테이너 레인이 실제로 실행한 이미지다(`config/testing/container-images.properties`). 이전 판은
|
|
> Kafka 4.2/4.3을 선언했지만 fixture는 `apache/kafka:4.1.0`, lockfile client는 4.1.1이었다 — 표와
|
|
> 코드 상수가 서로 일치했을 뿐 어느 쪽도 실행된 적이 없었다. 장애 시나리오 커버리지도 마찬가지로
|
|
> `BrokerFailureMatrix.shipped()` 하드코딩이 아니라 레인이 낸 증거(`BrokerCertificationEvidence`)에서
|
|
> 나온다. 증거가 없는 조합은 `NOT_COVERED`다 (MSG-014).
|
|
|
|
> **모듈 이름과 런타임 편입.** 관계형 신뢰성 구현은 `messaging-reliability-jdbc-postgresql`,
|
|
> 그 port만 보는 relay·consumer 로직은 `messaging-reliability`다(2026-09-28에
|
|
> `messaging-outbox-jdbc-postgresql` / `messaging-inbox-jdbc-postgresql`을 이렇게 나눴다). 그 전에는
|
|
> `-jpa`로 불렸다. 구현은 Spring JDBC이고 SQL은 PostgreSQL 전용(`jsonb`,
|
|
> `FOR UPDATE SKIP LOCKED`, `ON CONFLICT`, `TIMESTAMPTZ`)이므로, 그 이름은 쓰지 않는 기술을
|
|
> 광고하고 vendor 중립 port(`messaging-reliability-api`)의 위치를 가렸다 (MSG-023).
|
|
>
|
|
> `config/architecture/modules.json`은 messaging leaf의 `gradle_path`와 허용 의존성을 관리하지만
|
|
> `runtime_memberships` 필드는 없다. 실제 런타임 편입은 소비하는 앱의 Gradle 의존성(백엔드 템플릿은
|
|
> `app-bootstrap`이 고르는 adapter)과 starter / auto-configuration 경로가 결정한다. 아래 등급은 "무엇이 증명되었는가"를 말하며 런타임 편입 여부와
|
|
> 같은 축이 아니다. 자세한 composition/cutover 상태는 `messaging/AGENTS.md`가 소유한다.
|
|
|
|
## 브로커 등급
|
|
|
|
| 브로커 | 등급 | 인증 기준 | Stable 기능 | 제한 |
|
|
|---|---|---|---|---|
|
|
| Kafka | Stable | 4.1.x | producer idempotence, consumer group, batch, pause/resume, replay, transaction capability | Share Group 미지원 |
|
|
| Artemis/JMS | Extension | 범위 밖 | adapter SPI만 | 별도 ADR + Contract Suite 통과 필요 |
|
|
|
|
## Capability 매트릭스
|
|
|
|
`MessagingCapabilities`가 런타임에 선언하는 값이다. `false`인 기능을 요구하는 destination profile은
|
|
**startup에서 실패**하며, 조용히 약화되지 않는다.
|
|
|
|
| Capability | Kafka |
|
|
|---|---|
|
|
| brokerAcknowledgement | O |
|
|
| replicationOrPersistenceEvidence | O |
|
|
| perMessageSettlement | O |
|
|
| batchSettlement | O |
|
|
| orderedStream | O |
|
|
| keyedOrdering | O |
|
|
| replay | O |
|
|
| delayedDelivery | X |
|
|
| brokerTransaction | O |
|
|
| deduplicatedPublish | O |
|
|
| nativeDeadLetter | X |
|
|
| topologyManagement | O |
|
|
|
|
## 기능 등급
|
|
|
|
| 기능 | 등급 |
|
|
|---|---|
|
|
| Typed Publish·Consume | Stable M1 |
|
|
| At-least-once contract | Stable |
|
|
| Ambiguous publish 결과 | Stable |
|
|
| handler 성공 후 자동 settlement | Stable M1 |
|
|
| Batch / Manual settlement / Pause·Resume / Delayed / Replay 요청 | M2 |
|
|
| Broker transaction / partition / routing / subscription | M3 |
|
|
| Replay 실행 / Redrive / offset reset / purge / delete | M4 Admin |
|
|
|
|
## 무엇이 "Stable"을 증명하는가
|
|
|
|
Stable 등급은 두 가지를 **모두** 통과해야 한다. `CompatibilityMatrixTest`가 이 규칙을 강제한다.
|
|
|
|
### 1. 공유 Contract Suite (`MessagingAdapterContract`, 7개)
|
|
|
|
Kafka가 7개 테스트를 변경 없이 통과한다. 결정적 하네스를 쓰므로
|
|
확인 유실·settlement 유실 같은 장애를 요청 시점에 재현할 수 있다.
|
|
|
|
### 2. 실 브로커 인증 (Testcontainers)
|
|
|
|
| 스위트 | 무엇을 증명하는가 |
|
|
|---|---|
|
|
| `KafkaBrokerIT` | `acks=all`이 실제 replication 증거를 만든다 / 잘못된 토픽은 `REJECTED` / 발행-소비 왕복에서 identity 보존 및 contiguous commit |
|
|
| `KafkaAmbiguityChaosIT` | 브로커를 `docker pause`로 멈춘 상태의 publish가 **`AMBIGUOUS`** 로 보고된다 (broker acceptance 없음, confirmation level `NONE`, 비-retryable) |
|
|
| `KafkaBrokerCertificationIT` | 인증 레인. Toxiproxy를 broker 앞에 두고 connection cut / confirm 유실 / 지연 / settlement 유실을 각각 주입하고, 통과한 시나리오마다 `BrokerCertificationEvidence` 한 줄을 manifest에 쓴다 |
|
|
| `OutboxPostgresIT` | 롤백된 트랜잭션은 발행 가능한 행을 남기지 않는다 / `SKIP LOCKED` lease가 두 relay를 분리한다 / ambiguous 행이 같은 `messageId`로 재클레임된다 |
|
|
| `InboxPostgresIT` | 재전달이 side effect를 두 번 적용하지 않는다 / 롤백은 예약도 되돌린다 |
|
|
|
|
Docker가 없으면 `DockerAvailability` 가드로 skip되며, 이 표의 항목은 그때 **검증되지 않은 것**으로 취급한다.
|
|
`KafkaBrokerCertificationIT`만 예외다 — 인증 레인은 가드를 달지 않고 Docker가 없으면 실패한다. skip하는
|
|
레인은 아무도 켜지 않은 브로커에 대해 성공을 보고하기 때문이다. 그래서 이 레인은 `test`에서 태그로
|
|
제외되고 `messagingCertificationTest`로만 실행된다.
|
|
|
|
### 3. 장애 시나리오 커버리지 (`BrokerFailureMatrix`)
|
|
|
|
`NetworkFaultScenario`가 5개 시나리오와 **각각의 기대 결과**를 코드로 고정한다. 기대 결과를 어댑터별로
|
|
두지 않는 것이 핵심이다 — 어댑터마다 다른 답을 허용하면 공유 계약이 존재할 이유가 없다.
|
|
|
|
| 시나리오 | 시점 | 기대 결과 | 이유 |
|
|
|---|---|---|---|
|
|
| `connection-refused` | 전송 전 | `REJECTED` | 바이트가 나가지 않았으므로 broker가 가질 수 없다 |
|
|
| `connection-cut-after-write` | 전송 후 | `AMBIGUOUS` | broker가 저장했고 confirm만 유실됐을 수 있다 |
|
|
| `confirm-timeout` | 전송 후 | `AMBIGUOUS` | timeout은 부재의 증거가 아니라 증거의 부재다 |
|
|
| `settlement-lost` | settlement 중 | `REDELIVERED` | 미settlement 메시지는 재전달이 설계다 |
|
|
| `high-latency` | 전송 후 | `AMBIGUOUS` | 판단 시점에는 confirm 유실과 구별할 수 없다 |
|
|
|
|
`CrossBrokerContractSuite`가 릴리스 게이트로 이를 강제한다. Stable 어댑터는 5개 전부를 **실 브로커에서**
|
|
커버해야 하고, Experimental 어댑터는 `LIVE_BROKER` 커버리지를 주장할 수 없다. 커버리지는 *능력*이 아니라
|
|
*무엇을 실제로 돌렸는지*의 기록이다.
|
|
|
|
**증거의 출처.** `CertifiedEvidence`는 더 이상 손으로 쓴 목록이 아니라
|
|
`messaging-testkit/src/main/resources/messaging/broker-certification-evidence.jsonl`을 읽는다. 그 파일은
|
|
`messagingCertificationTest` 레인이 실제 Kafka 컨테이너에 장애를 주입하며 만들어낸 출력이고,
|
|
`verifyMessagingCertificationEvidence`가 커밋된 manifest와 이번 실행의 출력을 대조해 다르면 빌드를
|
|
실패시킨다. 즉 **manifest를 손으로 고치면 게이트가 깨지고, 레인을 돌리면 manifest가 다시 쓰인다.**
|
|
|
|
오늘 Kafka가 가진 증거는 `connection-cut-after-write` · `confirm-timeout` · `high-latency` ·
|
|
`settlement-lost` 네 개다. `connection-refused`는 남은 gap이며 그 이유가 있다 — Kafka producer는 연결
|
|
존재 여부를 알기 전에 레코드를 버퍼에 넣으므로, 연결 거부는 전송에 대해 아무것도 증명하지 못하는
|
|
delivery timeout으로 나타난다. 이를 `REJECTED`로 보고하는 것은 이 플랫폼이 금지한 추측이므로,
|
|
시나리오는 `CertifiedEvidence.knownGaps`가 이름으로 들고 있는 미커버 항목으로 남는다.
|
|
|
|
### 실 브로커가 실제로 잡아낸 결함
|
|
|
|
이 스위트들은 장식이 아니다. 작성 과정에서 결정적 테스트가 통과하는데 실 인프라에서 실패한
|
|
결함을 두 건 잡았다.
|
|
|
|
1. **Outbox `IN_FLIGHT` 고아 행** — lease 쿼리가 `PENDING`/`AMBIGUOUS`만 클레임 대상으로 봐서,
|
|
publish 도중 죽은 relay가 남긴 행이 lease 만료 후에도 영영 회수되지 않았다.
|
|
2. **Rabbit confirm 경합**(2026-09-25에 삭제된 Rabbit transport) — transport가 publish *후에* confirm을 등록해서, 연결 스레드에서
|
|
confirm이 먼저 도착하면 유실되고 호출자가 무한 대기했다.
|
|
|
|
둘 다 인메모리 double이 실제보다 관대해서 통과하고 있었다.
|
|
|
|
## 명시적 비지원
|
|
|
|
- 공통 `EXACTLY_ONCE` 설정 — `DeliveryGuarantee`에 상수가 존재하지 않는다.
|
|
- 전역 순서 — `OrderingScope`에 `GLOBAL`이 존재하지 않는다.
|
|
- DB와 broker의 자동 원자 transaction, 기본 XA
|
|
- Java native serialization
|
|
- 무제한 payload·header, 무한 retry
|
|
- 운영 application에서의 topology 파괴 작업
|
|
- 일반 애플리케이션에 raw broker client 반환
|
|
- DLQ publish 확인 전 source ACK
|
|
|
|
|
|
### Optional mapping utilities
|
|
|
|
- `messaging-cloudevents`는 starter runtime에 자동 편입되지 않는 **opt-in mapping utility**다.
|
|
내부 envelope와 CloudEvent 객체 사이의 제한된 profile mapping을 제공하지만 binary/structured
|
|
CloudEvents wire mode 전체를 구현하거나 임의 CloudEvents producer와의 1.0 interoperability를
|
|
인증하지 않는다.
|
|
- `messaging-claim-check`도 starter에 편입되지 않는 opt-in utility다.
|