SEV2INC-226해결
결제 웹훅 처리 지연
해결 요약
- 원인
- 카드 결제 대행사가 웹훅을 한꺼번에 다시 보내 대기열이 넘쳤어요.
- 조치
- 웹훅 처리 작업자를 3개에서 8개로 늘리고 중복 웹훅을 걸렀어요.
- 회고
- 회고가 필요해요
경과
1시간 50분만에 해결
- 감지
- 9월 17일 10:40
- 해결
- 9월 17일 12:30
- 담당
- 최유나
- 서비스
- payments
- 알림 규칙
- 웹훅 대기열 > 500건 · 10분
payments 웹훅 대기열
10:10–12:50
9월 17일 10:10부터 12:50까지의 payments 웹훅 대기열입니다. 25건 안팎에서 시작해 10:40에 알림이 발생했고, 가장 높을 때 1,741건까지 올랐습니다. 12:30에 해결로 바뀌었습니다.
기준선 500건방향키로 시점을 옮기면 값이 나와요
11:0012:00
타임라인
해결
웹훅 대기열이 비어 해결로 바꿨어요
최유나업데이트
결제 대행사에서 웹훅을 다시 보내고 있어요. 작업자를 늘렸어요.
확인
최유나가 확인하고 담당을 맡았어요