자동수집 → DB → 자동발행

한 파일에 모든 로직을 넣는 대신 수집과 저장, 발행을 분리하면 대상 사이트가 바뀌어도 전체 시스템을 다시 만들 필요가 없습니다.

문제

사람이 매일 여러 출처를 확인하고 동일한 형식으로 정리해 게시하면 시간이 많이 들고 누락이 생기기 쉽습니다.

구조

수집기 → 원본 검증 → 정규화 → 중복키 확인 → DB 저장 → 발행 조건 검사 → 게시/알림 → 로그 순으로 분리합니다.

운영에서 확인할 지표

수집 성공률, 누락률, 중복 건수, 발행 실패, 평균 처리시간을 기록합니다. 실제 고객 프로젝트에서는 공개 가능한 범위의 수치만 추가합니다.