Resumable Web-to-CSV Pipeline Kit
중단돼도 처음부터 다시 수집하지 않는 Python·Playwright CSV 자동화 소스 키트
0
0 팔로워
소개
웹 수집 작업이 중간에 멈췄을 때 이미 끝낸 레코드를 다시 요청하지 않도록 만든 로컬 실행형 소스 키트입니다.
성공 레코드마다 CSV를 먼저 원자적으로 저장하고 상태 파일을 갱신합니다. 재시도, 중복 ID 처리, JSONL 감사 로그, HTML 보고서, 오프라인 데모와 전체 테스트를 포함합니다. 강제 KeyboardInterrupt 회귀검사에서 재실행 시 완료 레코드 재수집 0건, 압축 해제본 테스트 10/10을 확인했습니다.
허용된 페이지와 사이트 약관·robots·속도 제한을 지키는 작업용입니다. 로그인·캡차·접근 통제 우회 기능은 없습니다. 맞춤 구축이나 원격 설정 지원도 포함하지 않습니다. Personal $18 / Team $44.25 출시는 8월 1일 20:13 KST까지 선착순 20회 자동 할인됩니다.
포스트
아직 포스트가 없습니다.
댓글
로그인 후 댓글을 남길 수 있습니다.
아직 댓글이 없습니다.