웹 크롤링 혼자서 공부해봤습니다! 코드 공유합니다~
네이버 인물정보 "재현"을 검색한 것을 url로 하여 앨범,공연 정보를 크롤링했습니다.
BeautifulSoup을 활용했고, 아직 사진이랑 방송 정보는 크롤링하는 법을 모르겠습니다. 알려주세요 ㅜㅜ
메인 코딩은 다음과 같습니다.
메인 화면에는 5개의 앨범만 나왔고, 모든 앨범을 크롤링하려면 다음을 클릭하는 것도 포함해야합니다.
저는 앨범 5개와 공연 5개를 뽑았고, 리스트로 한번에 묶어서 만들고 난 후 인덱싱하여 분리했습니다.
title은 앨범명, sub_title은 가수명, data는 날짜인데 공연은 가수명과 날짜 대신 위치만 나와있어서 csv로 내보낼때 칼럼명을 다르게 지정해줬습니다.
추가로 총 작품 건수도 출력해봤습니다.
+ 네이버 실시간 검색어 크롤링한 포스팅입니다.
https://rladuddms.tistory.com/63?category=921467
+ Selenium과 BeautifulSoup 라이브러리 비교한 포스팅입니다.
https://rladuddms.tistory.com/64?category=921467
'Stay Hungry Stay Foolish > 웹 크롤링' 카테고리의 다른 글
웹 크롤링) Selenium VS BeautifulSoup 라이브러리 비교 (0) | 2021.02.10 |
---|---|
웹 크롤링) BeautifulSoup으로 네이버 실시간검색어 크롤링하기 (0) | 2021.02.10 |
댓글