파이썬으로 웹크롤링한 정보를 엑셀로 저장하기 #1편

저번 시간까지는 웹크롤링하여 웹페이지에서 헤드라인 정보, 책제목 등을 가져와 봤습니다.

2022.07.31 - [파이썬 배우기] - 파이썬으로 웹크롤링 해 보기!!! 번외편 #3편 (교보문고 베스트셀러 웹크롤링!!!)

파이썬으로 웹크롤링 해 보기!!! 번외편 #3편 (교보문고 베스트셀러 웹크롤링!!!)

그렇다면 그렇게 가져온 정보를 엑셀로까지 가져오는 방법을 배워보겠습니다. 그렇지 않고서야 파이썬 터미널에 나온 데이터를 드래그 복사해서 다시 엑셀에 붙이는 번거로운 작업을 해야 합니다.

 

일단 환율 정보를 가져오는 코딩 해 보겠습니다. 책 제목 가져올 때 쓴 기본 구문 그대로 가져와 보겠습니다.

import requests

from bs4 import BeautifulSoup

x = requests.get("http://www.kyobobook.co.kr/bestSellerNew/bestseller.laf?orderClick=d79")

y = x.text

z = BeautifulSoup(y, "html.parser")

i = z.select(".title")

for ㅋㅋ in i:

    print(ㅋㅋ.text)

여기서 사이트를 바꿉니다.

 

여기 사이트입니다.

https://www.kebhana.com/cont/mall/mall15/mall1501/index.jsp

현재환율 < 환율/외화예금 금리 < 상품 < 하나은행

import requests

from bs4 import BeautifulSoup

 

x = requests.get("https://www.kebhana.com/cont/mall/mall15/mall1501/index.jsp")

y = x.text

 

z = BeautifulSoup(y, "html.parser")

 

i = z.select(".title")

for ㅋㅋ in i:

    print(ㅋㅋ.text)

엥? 갑자기 

브랜드사이트?

 브랜드사이트의  class가 title입니다.

 

그럼 그걸 바꿔볼까요?

결과값이 나오지 않습니다. 더 공부를 해서 업데이트를 해 보고, 그럼 다른 사이트에서 해 보겠습니다.

 

[인베스팅닷컴에서 환율정보 가져오기]

https://kr.investing.com/currencies/usd-krw

USD KRW | 미달러 원 환율 - Investing.com

import requests

from bs4 import BeautifulSoup

x = requests.get("https://kr.investing.com/currencies/usd-krw")

y = x.text

z = BeautifulSoup(y, "html.parser")

i = z.select(".text-2xl")

for ㅋㅋ in i:

    print(ㅋㅋ.text)

 

얘도 못 가져오네요. 이유를 파악하기 힘드네요.

 

자, 그럼 더 자세히 알면 더 해보고요. 일단은 기존에 성공한 책제목을 엑셀로 가져오는 방법을 공부해보겠습니다.

 

먼저 엑셀파일을 조작할 수 있는 라이브러리를 설치해 줘야 합니다. 

 

터미널에서

 

pip install openpyxl

 

을 적고 엔터를 칩니다. 전 이미 설치가 되었다고 뜨네요.

 

먼저 교보문고 책제목을 가져온 코딩 가져와보겠습니다.

사이트는 여기였습니다.

http://www.kyobobook.co.kr/bestSellerNew/bestseller.laf?orderClick=d79 

교보문고 종합 주간 집계 | 국내도서 | 베스트셀러 - 교보문고

import requests

from bs4 import BeautifulSoup

x = requests.get("http://www.kyobobook.co.kr/bestSellerNew/bestseller.laf?orderClick=d79")

y = x.text

z = BeautifulSoup(y, "html.parser")

i = z.select(".title")

for ㅋㅋ in i:

    print(ㅋㅋ.text)

 

여기서 아쉬운 것은 순위가 없는 겁니다. 그럼 순위의 class를 살펴볼까요?

 

 

 rank 인게 보이시죠?  <strong class = "rank">

 

import requests

from bs4 import BeautifulSoup

x = requests.get("http://www.kyobobook.co.kr/bestSellerNew/bestseller.laf?orderClick=d79")

y = x.text

z = BeautifulSoup(y, "html.parser")

i = z.select(".rank, .title")

for ㅋㅋ in i:

    print(ㅋㅋ.text)

 

아까와 바뀐게 뭔가요? 요놈입니다. 

 

i = z.select(".rank, .title")

 

요걸 추가해 주면 요렇게 나옵니다.

대박이죠?

 

다음 시간에는 이걸 엑셀로 출력하기 해 보겠습니다. 기대하세요^^