TR1L / 설계와 성능01 / 02
중복 없는 정산 Job 설계와 계산 단계 2시간 49분 → 11분
중복 정산을 막는 요구사항을 Step마다 지킬 상태 규칙으로 정하고, 실행 기록을 비교해 가장 오래 걸리던 계산 단계를 줄였습니다.
01다시 돌려도 중복이 없도록 Step마다 지킬 규칙 정하기
- 문제
- 요구사항은 "특정일 전체 정산", "중복 정산과 중복 발송 금지" 같은 결과 조건뿐이었습니다. 어느 단계가 어떤 상태를 남기고 어디까지 실패를 허용할지는 없었습니다.
- 행동
- 팀과 Event Storming으로 남길 상태, 실패 지점, 중복 금지 대상을 먼저 정하고, 이를 도메인 모델과 Step별 상태 규칙에 반영했습니다. Step0이 cutoff를 고정해 끝난 월은 건너뛰고(PR #47), 12개 테이블 조인은 Step1에서 사용자당 1행으로 평탄화했습니다(ADR-0001, PR #67). 계산 결과는 MongoDB 스냅샷으로 고정해 청구서 Job은 조회만 합니다(ADR-0003).
- 결과
- 정산, 발송 정책, 전송을 세 Bounded Context로 나누고, Step0–4마다 다시 돌려도 결과가 같도록 지킬 조건을 정했습니다. 판단은 도메인 문서와 ADR 2건에 남겼습니다.
- 트레이드오프
- 평탄화 테이블은 쓰기 비용이 들고 스키마가 바뀌면 마이그레이션이 필요합니다. 결과 저장소가 하나 늘었습니다.
022시간 49분 걸리던 정산 계산 단계
- 문제
- 기준 실행에서 Job 14,038초 중 Step03이 10,120초로 72.1%였습니다. 스레드 수, 파티션 수, 작업 큐 저장소가 함께 바뀌어 변경마다 효과를 따로 확인해야 했습니다.
- 행동
- 실행 기록을 변경 단위로 나눠 Step별 시간을 비교했습니다. Step02는 멱등 적재라 멀티스레드 Step을 걸었고(job 28에서 2.1배), Step03은 파티션마다 reader를 두고 userId 나머지로 후보를 나눠 파티션을 8개에서 16개로 늘렸습니다. 세 번 오가던 MongoDB claim은 큐를 PostgreSQL로 옮겨 UPDATE … RETURNING 한 번으로 줄였습니다.
- 결과
- Step03 10,120.4초 → 674.5초, Step02 3,496.0초 → 29.5초 (108만 명, job 47).
- 트레이드오프
- 멀티스레드 Step은 처리 위치를 저장하지 않아, 다시 돌리면 처음부터 적재하고 이미 있는 행은 건너뜁니다. 상태 UPDATE가 몰려 dead tuple이 쌓입니다.


| 실행 | 들어간 변경 | Step02 | Step03 |
|---|---|---|---|
| job 26 | 기준. MongoDB 큐, 단일 스레드 | 3,496.0초 | 10,120.4초 |
| job 28 | Step02 스레드 8, Step03 파티션 8 | 1,665.8초 | 4,615.3초 |
| job 43 | 큐를 PostgreSQL로, 파티션 16 | 29.3초 | 633.7초 |
| job 47 | 같은 코드 재실행 | 29.5초 | 674.5초 |

















