[python] 음원 정보 크롤링하기(feat.친구 추천 이벤트)

스파르타 웹개발 코스 3주차 과제 관련 내용

 

- 사용해보고 싶었던 기능은  아래 참조 였으니, 사용해보지는 못해서 아쉬움

 

.next_siblings()

 

- 초기에 ssl 인증 관련에러가 있어서, requests 에서 verify = False 로 설정함

 

사용한 코드

# genie 크롤링
# 가상환경 conda env sparta_py38

## 크롤링 관련 라이브러리
import requests
from bs4 import BeautifulSoup

# 의존성 에러
import ssl
## DB
# from pymongo import MongoClient

headers = {
  'User-Agent' : 'Mozilla/5.0 (Windows NT 10.0; Win64; x64)AppleWebKit/537.36 (KHTML, like Gecko) Chrome/73.0.3683.86 Safari/537.36'
}

url = 'https://www.genie.co.kr/chart/top200?ditc=M&rtm=N&ymd=20210701'
data = requests.get(url = url, headers = headers, verify = False)

soup = BeautifulSoup(data.text, 'html.parser')


# 목표  : 곡 순위 / 곡 제목 / 가수 출력하기
# 출력 : print(rank, title, artist)
# 앞에 두 글자만 끊기 text[0:2]
# strip() 으로 곡 자르기

#body-content > div.newest-list > div > table > tbody > tr:nth-child(1) > td.number
#body-content > div.newest-list > div > table > tbody > tr:nth-child(2) > td.number

#body-content > div.newest-list > div > table > tbody > tr:nth-child(1) > td.info > a.title.ellipsis

#body-content > div.newest-list > div > table > tbody > tr:nth-child(1) > td.info > a.artist.ellipsis


songs = soup.select('#body-content > div.newest-list > div > table > tbody > tr')

for song in songs:
  a = song.select_one('td.number').text[0:2].strip()
  b = song.select_one('td.info > a.title.ellipsis').text.strip()
  c = song.select_one('td.info > a.artist.ellipsis').text.strip()
  
  print(a, b, c)

 

결과 화면

 

그러고보니 , Peachs 에 Justin Bieber것은 왜 저런거지? 

후이

 

1 바라만 본다 MSG워너비 (M.O.M)
2 Next Level aespa
3 신호등 이무진
4 Weekend 태연 (TAEYEON)
5 치맛바람 (Chi Mat Ba Ram) 브레이브걸스 (Brave girls)
6 Butter 방탄소년단
7 나를 아는 사람 MSG워너비 (정상동기)
8 Permission to Dance 방탄소년단
9 비 오는 날 듣기 좋은 노래 (Feat. Colde) 에픽하이 (EPIK HIGH)
10 헤픈 우연 헤이즈 (Heize)
11 하루만 더 빅마마 (Big Mama)
12 비와 당신 이무진
13 Alcohol-Free TWICE (트와이스)
14 롤린 (Rollin') 브레이브걸스 (Brave girls)
15 19금




                                    Peaches (Feat. Daniel Caesar & Giveon) Justin Bieber
16 Dun Dun Dance 오마이걸 (OH MY GIRL)
17 Dynamite 방탄소년단
18 라일락 아이유 (IU)
19 안녕 (Hello) 조이 (JOY)
20 추적이는 여름 비가 되어 장범준
21 운전만해 (We Ride) 브레이브걸스 (Brave girls)
22 Celebrity 아이유 (IU)
23 러브 (Prod. by 로코베리) 로꼬 & 이성경
24 Bad Habits Ed Sheeran
25 상상더하기 MSG워너비
26 ASAP STAYC (스테이씨)
27 상상더하기 라붐 (LABOUM)
28 밤이 되니까 원슈타인
29 Timeless SG워너비
30 좋아좋아 조정석
31 Savage Love (Laxed - Siren Beat) (BTS Remix) Jawsh 685 & Jason Derulo & 방탄소년단
32 다정히 내 이름을 부르면 경서예지 & 전건호
33 내 손을 잡아 아이유 (IU)
34 사이렌 Remix (Feat. UNEDUCATED KID & Paul Blanco) 호미들
35 At My Worst Pink Sweat$
36 작은 것들을 위한 시 (Boy With Luv) (Feat. Halsey) 방탄소년단
37 OHAYO MY NIGHT 디핵 (D-Hack) & PATEKO
38 가을 우체국 앞에서 김대명
39 나는 너 좋아 장범준
40 멜로디 ASH ISLAND
41 Blueming 아이유 (IU)
42 밝게 빛나는 별이 되어 비춰줄게 송이한
43 에잇 (Prod. & Feat. SUGA of BTS) 아이유 (IU)
44 2002 Anne-Marie
45 LOVE DAY (2021) (바른연애 길잡이 X 양요섭, 정은지) 양요섭 & 정은지
46 아로하 조정석
47 흔들리는 꽃들 속에서 네 샴푸향이 느껴진거야 장범준
48 이제 나만 믿어요 임영웅
49 낙하 (With 아이유) AKMU (악뮤)
50 Off My Face Justin Bieber

 

 

---

코드 관련 질문은 언제든 환영입니다.

 

---

친구 추천 관려 이벤트가 있었는데, 지금 확인해보니, 생각보다 괜찮은 것 같다.

 

어짜피 수강할 계획이라면, 서로 같이 혜택 받으면서 공부할 수 있는 꿀팁이 아닐까 싶어서 공유하면.

 

처럼 해당 링크를 타고 초대된 친구가 회원 가입을 하면, 스파르타 코딩에서 5만원 할인 혜택과 현금이 주어진다고 하니, 혹시 이 글을 보고 계신 코딩러 or 개발자 분들은 같이 갑시다~~~ 사랑해요

 

링크 

하단 참조 바람

👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇👇

 

https://spartacodingclub.kr/?f_name=%EC%9E%84%EC%A0%95%EC%9B%85&f_uid=632402d13779a6a5e15a0b0a 

스파르타코딩클럽

 

☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️☝️