[KT] 요금제, 공시지원금 크롤링

# 사용 언어: Python

# 사용 패키지: Selenium

 

통신사 홈페이지는 동적 페이지이다.

즉 요금제, 통신망 선택에 따라 지원금과 기종 등 보여주는 정보가 달라진다.

따라서 웹 스크래핑의 기본으로 사용되는 Request 패키지로는 모든 정보를 스크래핑 할 수 없다.

동적 페이지의 정보를 가져오기 위해서는 실제 사용자가 페이지를 조작하는 효과를 주는 Selenium 패키지를 이용하면 다양한 정보를 스크래핑 할 수 있다.

 

이후에는 통신망, 요금제, 기종 별 공시지원금 스크래핑이 필요하다.

 

▲ 5G 요금제

▲ LTE 요금제

▲ 5G 공시지원금

▲ LTE 공시지원금