파이썬(python)으로 RSS 크롤링하기
1. RSS 크롤링 하기
1.1 feedparser 인스톨하기
> pip install feedparser
위와 같이 feedparser를 인스톨 합니다.
1.2 RSS피드 주소확인하기
https://pypi.python.org/pypi 에 접속합니다.
위에 접속한 데이터를 가져오도록 하겠습니다.
https://pypi.python.org/pypi?%3Aaction=rss 의 내용입니다.
https://pypi.python.org/pypi?%3Aaction=packages_rss 의 내용입니다.
두개의 RSS정보를 가져와 보도록 하겠습니다.
1.3 소스 코딩하기
아래와 같이 코딩합니다.
위의 소스코드를 입력하고. crawl_rss.py로 저장합니다.
> python crawl_rss.py
를 입력합니다.
1.4 결과 확인하기
결과가 아래와 같이 나타납니다.
이상과 같이 파이썬에서 RSS피드 정보를 가져오는 방법을 알아보았습니다. 여기에서 주의할점은
pubDate는 pubDate를 그대로 사용하는 것이 아니라 published를 사용하는 것입니다. 이것만 잘 기억한다면 RSS피드의 정보를 가져와서 활용할 수 있습니다.
1.99 요약
이상과 같이 URL 에서 RSS피드의 정보를 가져와서 파싱하고 파싱한 정보를 출력해 보았습니다.