실운영과 유사한 패턴을 위해 템플릿 조합으로 생성되었습니다.
장시간 요청을 피하기 위해 작업은 큐 워커에서 청크 단위로 나누어 처리합니다.
조회수와 댓글 수는 운영 패턴을 흉내 내되 너무 복잡한 자연어 생성은 의도적으로 생략했습니다.
중단 후 재개 시 중복 적재를 막기 위해 작업 상태와 진행 포인터를 별도 테이블에 기록합니다.
대량 생성 중 예외가 발생하면 실패 시점과 청크 단위를 로그에 남기도록 했습니다.
재현 가능한 시드를 사용하면 동일한 설정으로 유사한 데이터셋을 다시 만들 수 있습니다.
Comments3
임 서현
임 서현 · 01-02
재실행 시 충돌 없이 이어지는지 확인해 주세요. 댓글 수 편차가 잘 들어간 것 같습니다. 확인했습니다.