Files
clean-architecture-backend-…/docs/messaging/migration-guide.md
T

4.5 KiB

마이그레이션 가이드

기존 Spring Kafka / Spring AMQP 코드에서

1. topic 이름을 코드에서 제거한다

// before
kafkaTemplate.send("order.events.v1", key, payload);

// after
publisher.publish(orderEvents, envelope, PublishOptions.defaults());

MessageDestination은 logical name만 가진다. 물리 매핑은 destination profile이 소유한다. DestinationName의 패턴이 topic://orders 같은 값을 거부하므로 우회할 수 없다.

2. boolean 성공 판정을 없앤다

// before
try { template.send(...).get(); success(); }
catch (Exception e) { fail(); }        // REJECTED와 AMBIGUOUS를 구분하지 못한다

// after
PublishResult result = ...;
switch (result.completion()) {
    case CONFIRMED -> success();
    case REJECTED  -> abandon();                    // broker가 저장하지 않음이 확정
    case AMBIGUOUS -> retrySameMessageId(result);   // broker가 가지고 있을 수 있음
}

이 구분이 없으면 confirm 유실 한 번이 중복 주문 하나가 된다.

3. auto-commit / auto-ack를 끈다

# Kafka
enable.auto.commit: false
# RabbitMQ
auto-ack: false

둘 다 validator가 강제로 거부한다. 타이머 기반 commit은 handler가 실행되기도 전에 메시지를 처리 완료로 표시한다.

4. handler에서 ack 호출을 제거한다

// before
@KafkaListener(...)
void handle(ConsumerRecord<?,?> record, Acknowledgment ack) {
    process(record);
    ack.acknowledge();          // 실패 시 순서가 애매해진다
}

// after
CompletionStage<HandleResult> handle(MessageDelivery<OrderCreated> delivery) {
    process(delivery.message().payload());
    return completedFuture(HandleResult.success());
}

settlement는 플랫폼이 수행한다. "성공한 뒤에만 ack"가 각 handler의 기억이 아니라 플랫폼 불변식이 된다.

5. 중복을 정상 상황으로 다룬다

at-least-once는 중복을 전제한다. 세 가지 중 하나를 고른다.

방식 언제
handler 자체 멱등 자연 멱등 연산 (upsert 등)
Inbox DB side effect가 있는 경우
Kafka transaction Kafka → Kafka 파이프라인만

ExternalSideEffectGuarantee에 선언한다. INBOX_TRANSACTIONAL과 Kafka transaction을 동시에 설정하면 거부된다. Kafka transaction은 DB를 포함하지 않는다.

6. 큰 payload는 Claim Check로

broker frame 크기를 키우지 않는다. broker 메모리, replication latency, consumer recovery가 동시에 나빠지고, 유계·검증 가능한 실패가 무계 실패로 바뀐다.

1 MiB 초과는 외부 저장소로 offload하고 digest를 포함한 참조만 발행한다.

DB 마이그레이션

V1001__messaging_outbox.sql
V1002__messaging_outbox_lease_fencing.sql
V1003__messaging_admin_operation_journal.sql
V1004__messaging_outbox_canonical_metadata.sql
V1101__messaging_inbox.sql

Messaging owns Flyway versions 1000..1999. The starter assembles both JDBC reliability modules, so their migrations deliberately share classpath:db/migration/messaging but must never reuse a version. Keeping them in this reserved range also prevents collisions with the application's ordinary db/migration/postgresql stream, whose low-numbered versions are independent.

When adopting outbox/inbox persistence, add classpath:db/migration/messaging to the deployment's Flyway locations together with its normal application migration location. Do not copy or renumber these files into the application's low-numbered stream; the reserved range is the namespace boundary.

Outbox row는 business transaction과 같은 transaction에서 쓴다. Inbox reservation은 handler side effect와 같은 transaction에서 쓴다. 별도 transaction이면 각 패턴이 닫으려던 창이 그대로 열려 있다.

단계적 전환

  1. publish만 전환 — 기존 consumer는 그대로. wire format은 reserved header가 추가될 뿐이다.
  2. Outbox 도입 — publish 유실 창을 닫는다.
  3. consume 전환 — handler를 MessageHandler로 옮기고 ack 호출을 제거한다.
  4. Inbox 도입 — 중복 side effect를 닫는다.
  5. retry·DLQ 정책 선언 — 이 시점까지 자동 retry는 0회다.

각 단계는 독립적으로 배포 가능하고, 되돌릴 수 있다.

되돌릴 수 없는 것

  • 한 번 발행된 message type의 wire contract
  • 이미 retention 안에 있는 메시지의 schema
  • redrive된 메시지의 messageId (바뀌지 않는다 — 이것이 의도다)