스크레이퍼가 고장 난 게 아닙니다. 사이트가 바뀌었는데, 알려주지 않았을 뿐입니다.

한 스크래퍼가 몇 주간 성공적으로 실행됐지만, A/B 테스트로 가격 요소 위치가 바뀌면서 많은 가격 값이 조용히 null로 저장됐다.

이 글은 마크업 변경으로 추출 데이터가 망가져도 종료 코드만으로는 의미적 실패를 잡아내지 못한다고 지적한다.

해결책으로는 fill-rate 체크와 롤링 베이스라인 비교를 통해 마크업 드리프트를 조기에 탐지해야 한다고 제안한다.

이는 잘못된 스크래핑 데이터가 웨어하우스와 대시보드로 퍼져 내려가 의사결정을 왜곡할 수 있기 때문이다.