IT/크롤링

IP 차단에 대한 대비책

code_decoder 2025. 1. 6. 23:33

자료 조사 중, IP 차단에 대한 자료를 볼 수 있었다.

주기적으로 데이터를 수집하는 크롤링의 특성상, 같은 IP로 데이터를 수집한다면 차단된 가능성이 높아진다.

이를 방지하기 위해, 테더링이나 프록시 서버를 이용하여 다른 IP로 대체하여 데이터 수집을 이어갈 수 있다.