inflearn logo
강의

Khóa học

Chia sẻ kiến thức

Thu thập dữ liệu cực kỳ đơn giản và tốc độ cao (thu thập dữ liệu Python)

Tìm và thu thập thông tin liên kết URL

질문이요

295

Inhoo Song

5 câu hỏi đã được viết

2

import requests
from bs4 import BeautifulSoup
req = requests.get(
'https://www.donga.com/news/Entertainment/List?p=1&prod=news&ymd=&m=')
soup = BeautifulSoup(req.text
, 'html.parser')

for i in soup.select("#contents > div.page > a") :

req2 = requests.get(
"http://www.donga.com/news/List/Enter/" + i['href'])
soup2 = BeautifulSoup(req2.text
, 'html.parser')

for i in soup2.find_all("span", class_="tit") :
print(i.text)


C:\Users\karma\PycharmProjects\pychamwebcrawling\venv\Scripts\python.exe "C:/Users/karma/PycharmProjects/pychamwebcrawling/01_web_crawling_naver_test/url 링크 찾아내서 크롤링.py" Process finished with exit code 0

머가 문제인건가요???


웹-크롤링 python

Câu trả lời 4

0

bokchi

파이팅입니다~

0

irunspal

감사합니다.

기초가부족한 상태라

기초를 잘 다져서 따라해보겠습니다

0

bokchi

코드를 약간 수정했습니다 여기서부터 한번 시작해보실래요?

0

bokchi

import requests
from bs4 import BeautifulSoup
req = requests.get('https://www.donga.com/news/Entertainment/List?p=1&prod=news&ymd=&m=')
soup = BeautifulSoup(req.text, 'html.parser')

print(soup.select("#content > div.page > a"))

for i in soup.select("#content > div.page > a") :
print("http://www.donga.com/news/List/Enter/" + i['href'])

안녕하세요? 강사님 질문있습니다.(인코딩관련)

0

10

1

강의자료 문의

0

9

0

업캐스팅 문제 예시 4번 부모 호출

0

14

1

강의자료 링크 열리지 않음.

0

16

2

이진분류에서 양성 클래스가 0일 때 평가 방법

0

15

2

모의고사 자료 해설이 너무 불친절하네요.

0

37

2

부모의 생성자 출력 관련

0

15

2

이론파트 재탕문제

0

17

0

누락코드

0

18

1

다차원 배열 포인터 질문있습니다

0

21

3

안녕하세요 파이썬 관련 문의드립니다

0

311

1

개발자님 도와주세요

0

249

1

질문입니다

0

302

3

크롬드라이버 설치

0

295

1

크롬드라이버 설치질문

0

234

1

브라우저가 안나와요

0

260

1

에디터와 모듈 관련

0

227

1

여러 페이지 크롤링

0

321

3

패키지 설치 방법 알려주세요

0

483

3

셀레니움 설치 관련

0

284

1

12페이지 이후 print

0

240

3

파이참설치안하고 아나콘다의 주피터 노트북으로 강의내용 따라가도되나요~?

0

274

3

chromedriver 라이브러리

2

357

3

다음 실시간 검색어 클래스 추출 불가

1

307

1