SEV2INC-230해결
작업 대기열 적체
해결 요약
- 원인
- v1.7.0에서 작업 동시 처리 수 설정을 읽지 못해 1로 떨어졌어요.
- 조치
- v1.6.2로 롤백하고 쌓인 작업 8,400건을 처리했어요.
- 회고
- 회고가 필요해요
경과
44분만에 해결
- 감지
- 9월 29일 15:34
- 해결
- 9월 29일 16:18
- 담당
- 박지훈
- 서비스
- worker
worker 대기열 길이
15:04–16:38
9월 29일 15:04부터 16:38까지의 worker 대기열 길이입니다. 90건 안팎에서 시작해 15:34에 알림이 발생했고, 가장 높을 때 4,412건까지 올랐습니다. 16:18에 해결로 바뀌었습니다.
16:05worker v1.6.2 롤백
15:20worker v1.7.0
기준선 1,000건방향키로 시점을 옮기면 값이 나와요15:3016:0016:30
타임라인
해결
대기열이 평소 수준으로 돌아와 해결로 바꿨어요
이수민댓글
동시 처리 수가 1로 떨어져 있어요. v1.7.0의 설정 변경 때문이에요.
확인
박지훈이 확인하고 담당을 맡았어요