G7Devops

처리 내역 로그 분석 #30539

박 Michael박 Michael ·
25-12-1331924
실운영과 유사한 패턴을 위해 템플릿 조합으로 생성되었습니다. 대량 생성 중 예외가 발생하면 실패 시점과 청크 단위를 로그에 남기도록 했습니다. 게시판 파티션 구조를 고려해 초기화 시에는 일반 삭제보다 빠른 정리 루틴을 사용합니다. 장시간 요청을 피하기 위해 작업은 큐 워커에서 청크 단위로 나누어 처리합니다. 중단 후 재개 시 중복 적재를 막기 위해 작업 상태와 진행 포인터를 별도 테이블에 기록합니다. 재현 가능한 시드를 사용하면 동일한 설정으로 유사한 데이터셋을 다시 만들 수 있습니다.

Comments4

윤 주원
윤 주원 · 25-12-14

배치 크기만 조금 더 조정해 보시면 될 듯합니다.

정 지민
정 지민 · 25-12-18

추가 로그도 같이 보면 좋겠습니다. 저도 같은 현상을 확인했습니다.

Davis 윤서
Davis 윤서 · 25-12-18

좋은 정보 감사합니다.

이 준우
이 준우 · 25-12-20

다음 청크 결과도 공유 부탁드립니다.

You don't have permission to write comments