실운영과 유사한 패턴을 위해 템플릿 조합으로 생성되었습니다.
중단 후 재개 시 중복 적재를 막기 위해 작업 상태와 진행 포인터를 별도 테이블에 기록합니다.
게시판별 데이터량은 균등 분포가 아니라 상위 몇 개 게시판에 더 집중되도록 설계했습니다.
장시간 요청을 피하기 위해 작업은 큐 워커에서 청크 단위로 나누어 처리합니다.
작성 시각은 최근 집중과 장기 분산 시나리오를 모두 검증할 수 있도록 옵션화했습니다.
작성 시각은 최근 집중과 장기 분산 시나리오를 모두 검증할 수 있도록 옵션화했습니다.
Comments6
Brown 하은
Brown 하은 · 25-12-29
댓글 수 편차가 잘 들어간 것 같습니다. 추가 로그도 같이 보면 좋겠습니다.
Williams Michael
Williams Michael · 25-12-30
최근 데이터 쏠림이 꽤 자연스럽네요.
정 Isabella
정 Isabella · 25-12-30
다음 청크 결과도 공유 부탁드립니다.
최 하준
최 하준 · 25-12-30
추가 로그도 같이 보면 좋겠습니다.
김 하윤
김 하윤 · 25-12-30
재실행 시 충돌 없이 이어지는지 확인해 주세요. 댓글 수 편차가 잘 들어간 것 같습니다. 추가 로그도 같이 보면 좋겠습니다.