Howoo Jang

<a href="https://www.inflearn.com/questions/21894" target="_blank" rel="noopener noreferrer">https://www.inflearn.com/questions/21894</a>

위 링크 제 코드 참조

네이버 크롤링에서 결과값이 나오지 않습니다.

네이버 크롤링에서 제 코드에서 어떤 문제가 있는지 모르겠어요. 

스크래피 다루는 이 강의 말고 전 강의 '파이썬입문과 크롤링기초 부트캠프'로 돌아가셔서 저 부분 참고하세요. 크롬에서 F12 눌러서 CSS SELECTOR 복사 해서 붙여넣기하면 안되는 경우가 훨씬 더 많으니깐, 아래 강의 보시면 차례대로 상위 태그에서 하위 태그로 줌-인해서 원하는거만 빼낼 수 있는 방법 알려줍니다. 하위에서 상위로 가는 반대도 알려주고요.
<img src="https://cdn.inflearn.com/public/comments/075ec000-f46b-48f8-8979-ed61e7141182/Cap 2020-01-19 15-50-40-473.png" title="Cap 2020-01-19 15-50-40-473.png" width="298" height="547" alt="" />
<img src="https://cdn.inflearn.com/public/comments/3bf47635-f3e7-4c1b-a2d0-3bc0026846c4/Cap 2020-01-19 15-51-38-718.png" title="Cap 2020-01-19 15-51-38-718.png" alt="" />


import requests
from bs4 import BeautifulSoup

html = '<div class = "correction_box"> \
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; <ul class = "correction_field"> \
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; <li class = "incorrect"> 저는 그다지 잘해서 그린때문에 어느 그림을 사진에</li> \
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; <li class = "corrected correct"> \
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; \
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; "저는 그다지 잘" \
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; ... \
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 못 \
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; "그"\
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; ... \
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 려서 \
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; "어느 그림을 사진에" \
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; \
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; </ul> \
&nbsp; &nbsp; &nbsp; &nbsp; </div>'
&nbsp; &nbsp;&nbsp;
soup = BeautifulSoup(html, "html.parser")
data= soup.select('ul.correction_field p')

for item in data:
&nbsp; &nbsp; print(item.get_text().strip())

css관련 질문

새롭게 켜서 다시 해보세요. 저는 잘 되는데 노트북 다시 시작하고 그 새로고침 버튼 같이 생긴 커널 재시작인가 그거 한번 눌러보세요
<img src="https://cdn.inflearn.com/public/comments/04e01fe9-f2d4-4a71-96ae-ef3fbea5bef9/Cap 2020-01-17 23-58-42-804.png" title="Cap 2020-01-17 23-58-42-804.png" width="1389" height="478" alt="" />

질문이 있습니다~

안녕하세요.
윗분 말씀대로 실시간 관련 소스는 저 부분이 전부입니다. 그래서 www.naver.com 말고 급상승 검색어를 클릭하시고 DataLab 페이지로 들어가세요. 그리고 F12 클릭하시면 실시간 검색어 순위가 나타날텐데요. 거기서 크롤링을 하시면 되겠습니다. 아래 코드를 삽입하시면 작동합니다. 첫번째 코드에 있는 headers 부분은 네이버가 무슨 이유인지 모르겠지만 싸이트에 접속을 못하게 해서 우회용도로 쓰인거라 강의에서 다룬 내용과 같은 코드인 두번재 코드를 삽입해서 작동이 되는지 먼저 확인을 해보시고, 안되면 첫번재 코드를 넣어서 작동시켜 보시길 바랍니다.
<img src="https://cdn.inflearn.com/public/comments/9bb572f1-f02d-4464-a1fb-72970a8b8825/Cap 2020-01-17 23-43-04-219.png" title="Cap 2020-01-17 23-43-04-219.png" width="1374" height="794" alt="" />

<img src="https://cdn.inflearn.com/public/comments/31833ec6-6ea9-4df9-b682-48948e9c2cbe/Cap 2020-01-17 23-52-28-085.png" title="Cap 2020-01-17 23-52-28-085.png" alt="" />

<img src="https://cdn.inflearn.com/public/comments/87fcbdb5-c19c-45d8-ac13-8cb979408f44/Cap 2020-01-17 23-48-19-870.png" title="Cap 2020-01-17 23-48-19-870.png" alt="" />

첫번째 코드
import requests
from bs4 import BeautifulSoup

headers = {'User-Agent':'Mozilla/5.0 (Windows NT 6.3; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36'}
url = 'https://datalab.naver.com/keyword/realtimeList.naver?where=main'
res = requests.get(url, headers = headers)
soup = BeautifulSoup(res.content, 'html.parser')

data = soup.findAll('span','item_title')

for item in data:
&nbsp; &nbsp; print(item.get_text())

두번째 코드

res1 = requests.get('https://datalab.naver.com/keyword/realtimeList.naver?where=main')
soup1 = BeautifulSoup(res.content, 'html.parser')

data1 = soup.findAll('span', 'item_title')

for item in data1:
&nbsp; &nbsp; print(item.get_text())

실전 크롤링과 강력한 크롤링 기술 팁2: 네이버 사이트 크롤링 강의중 질문이 있습니다.

네. 초반부만 문제랑 답안지 있고 나머지 강의부터는 전부 다 lecture 입니다.

다운받은 자료에 답이 다 나와있는데 원래 그런건가요? 

이렇게 해보세요.&nbsp;
<img src="https://cdn.inflearn.com/public/comments/53ad8002-9da0-483c-aab2-b5efd0814756/Cap%202020-01-13%2015-29-36-955.png" title="Cap 2020-01-13 15-29-36-955.png" width="465" height="590" alt="" />
첫번째 코드
data1 = int(input("data1 is : "))
data2 = int(input("data2 is : "))
data3 = int(input("data3 is : "))

numbers = [data1, data2, data3]

print("Smallest element is: ", min(numbers))

두번째 코드
num1 = int(input('Enter First number : '))
num2 = int(input('Enter Second number : '))
num3 = int(input('Enter Third number : '))


if (num1 < num2) and (num1 < num3):
&nbsp; &nbsp; smallest_num = num1
elif (num2 < num1) and (num2 < num3):
&nbsp; &nbsp; smallest_num = num2
else:
&nbsp; &nbsp; smallest_num = num3
&nbsp;
print("The smallest of the 3 numbers is : ", smallest_num)

&nbsp; &nbsp;&nbsp;

Howoo Jang

Posts