1-2. 웹 스크래핑 팁

1 개발자도구

브라우저에서 제공하는 개발자도구(일반적으로 F12)를 활용하면 해당 웹페이지와 관련한 데이터를 볼 수 있다.

1.1 Network 탭

웹서핑을 할 때 어떤 통신이 오갔는지 볼 수 있다.

Preserve log : 일반적으로 과거 정보를 지우고 새로운 페이지의 통신정보만 보여주는데, 이걸 체크해두면 내용을 지우지 않고 유지한다.

보통 웹페이지 자체를 보기 위해 Doc 탭을 클릭해 살펴본다. 하나하나 클릭하면 자세히 볼 수 있다.