Seon-Ah

<pre><code class="language-python">import requests
from bs4 import BeautifulSoup
import pyautogui

keyword = pyautogui.prompt("검색어를 입력하세요>>>")
lastpage = pyautogui.prompt("마지막 페이지 번호를 입력해 주세요")
pageNum = 1
for i in range(1,int(lastpage)*10,10):
	print(f"{pageNum}페이지 입니다.=====================")
	response= requests.get(f"https://search.naver.com/search.naver?ssc=tab.news.all&where=news&sm=tab_jum&query={keyword}&start={i}")
	html = response.text
	
	soup = BeautifulSoup(html, 'html.parser')
	links = soup.select(".news_tit")
	
	for link in links:
		title = link.text
		url = link.attrs['href']
		print(title,url)
		pageNum = pageNum+1</code></pre><p>위와 같이 코드를 실행시키니, 저는 10페이지까지 크롤링하고 싶은데 1,11,21,31---91페이지 이런식으로 가져와집니다. 뭐가 문제일까요?</p>

Seon-Ah

Posts