강의

멘토링

로드맵

인프런 커뮤니티 질문&답변

김병인님의 프로필 이미지
김병인

작성한 질문수

[리뉴얼] 파이썬입문과 크롤링기초 부트캠프 [파이썬, 웹, 데이터 이해 기본까지] (업데이트)

실전 크롤링과 강력한 크롤링 기술 팁2 (업데이트)

강좌 코드가 실행이 안됩니다.

작성

·

274

0

파이썬버전 3.8.3이고요

import requests

from bs4 import BeautifulSoup

res = requests.get("https://davelee-fun.github.io/blog/crawl_test")

soup = BeautifulSoup(res.content, "html.parser")

section = soup.find("ul", id = "dev_cource_list")

여기까지는 실행됩니다. 그 후로 안됩니다. 버전문제일까요?

titles = section.find_all("li","course")

AttributeError                            Traceback (most recent call last)
<ipython-input-46-b1221549ad55> in <module>
----> 1 titles = section.find_all("li","course")

AttributeError: 'NoneType' object has no attribute 'find_all'

퀴즈

웹 크롤링 시 Chrome 개발자 도구의 'Elements' 탭을 활용하는 주된 목적은 무엇일까요?

웹 페이지의 전체 소스 코드를 자동으로 수정하기 위해

웹 페이지 요소의 HTML 구조, 태그, 클래스/ID를 파악하기 위해

크롤링 속도를 실시간으로 측정하고 최적화하기 위해

웹 서버에 과부하를 주어 응답 속도를 테스트하기 위해

답변 2

1

안녕하세요~,  제가 살펴보니

자세히 보면 

section = soup.find("ul", id = "dev_cource_list") 

이 부분에 철자가 하나 틀렸어요.

cource -> course 로 바꾸시기만 하면 되요.

전체 코드 ----

import requests

from bs4 import BeautifulSoup

res = requests.get("https://davelee-fun.github.io/blog/crawl_test")

soup = BeautifulSoup(res.content, "html.parser")

section = soup.find("ul", id = "dev_course_list")

titles = section.find_all("li","course")

for title in titles:

    print(title.get_text())

0

김병인님의 프로필 이미지
김병인
질문자

하허 감사합니다. 가끔 이러네요 몇분을봐도 눈에 안들어오는...

김병인님의 프로필 이미지
김병인

작성한 질문수

질문하기