파이썬으로 웹 스크랩하기2/10

파이썬으로 웹 스크랩하기2/10 두번째 requests모듈을 이용한 방법 requests 모듈을 이용하여 웹페이지 html을 가져와서 분석하는 방법에 대해서 알아보도록 하겠습니다. 우선 requests를 사용하기 위해서는 requests 모듈을 import 하였습니다. https://www.daum.net을 get 메소드를 통해서 결과값을 가져와 출력하니 아래와 같은 결과를 얻을수 있습니다. 이번에는 requests.get 의 결과값이 정상인지 확인해보았습니다. response.status_code == 200인경우는 정상적으로 웹페이지를 가져왔다는 결과입니다. 아래와 같이 200을 출력하였습니다. […]

파이썬으로 웹 스크랩하기1/10

파이썬으로 웹 스크랩하기 과거에는 컴퓨터하는것과 인터넷 하는것은 동일하지 않았습니다. 현재에 컴퓨터 하다는 인터넷 하다와 동일시 되고 있습니다. 최소한 인터넷을 하지 않아도 네트워크로 연결된 무엇인가를 하는것입니다.   파이썬으로 웹 페이지를 스크랩하기 위한 방법은 세가지 방법이 있습니다. 1. webbrowser 2. requests 3. Beautiful Soup 4. Selenium 위의 네가지 방법으로 인터넷의 웹페이지를 읽어와서 분석하는 방법에 대해서 알아보도록 하겠습니다. […]