유튜브 크롤링

- 학습 관련 질문을 남겨주세요. 상세히 작성하면 더 좋아요!
- 먼저 유사한 질문이 있었는지 검색해보세요.
- 서로 예의를 지키며 존중하는 문화를 만들어가요.
- 잠깐! 인프런 서비스 운영 관련 문의는 1:1 문의하기를 이용해주세요.

안녕하세요 선생님

파이썬 처음 깔아봤는데 덕분에 여기까지 왔습니다

어떻게 이것저것 끼워넣어서 코드를 만들기는 했는데

유튜브 크롤링시

날짜 지정해서 그 날짜만 가져오고 싶습니다

스크롤 없애고 날짜 지정을 넣고 싶은데 너무 어렵네요

코드 수정 부탁드려도 될까요ㅠㅠ

from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.common.keys import Keys
from selenium.webdriver.chrome.options import Options
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
from bs4 import BeautifulSoup
import time
import pyautogui
import openpyxl

# 검색어 입력
keyword = pyautogui.prompt("검색어를 입력하세요")
# 엑셀 생성
wb = openpyxl.Workbook()
ws = wb.create_sheet(keyword)
ws.append(['번호', '제목', '조회수', '날짜', 'URL'])

#열 너비 조절
ws.column_dimensions['A'].width = 5
ws.column_dimensions['B'].width = 80
ws.column_dimensions['C'].width = 20
ws.column_dimensions['D'].width = 15
ws.column_dimensions['E'].width = 80



# 브라우저 설정
chrome_options = Options()
chrome_options.add_experimental_option("detach", True)
chrome_options.add_experimental_option("excludeSwitches", ["enable-logging"])
browser = webdriver.Chrome(options=chrome_options)

# YouTube 검색 페이지로 이동
url = f"https://www.youtube.com/results?search_query={keyword}"
browser.implicitly_wait(5)
browser.maximize_window()
browser.get(url)

# 스크롤 횟수
scroll_count = 5

# 스크롤 수행
i = 1
while True:
    browser.find_element(By.CSS_SELECTOR, "body").send_keys(Keys.END)
    time.sleep(0.7)

    if i == scroll_count:
        break
    i += 1

# 동적으로 로딩되는 콘텐츠를 기다림
wait = WebDriverWait(browser, 10)
wait.until(EC.presence_of_element_located((By.CSS_SELECTOR, "ytd-video-renderer #video-title")))

# 페이지 소스를 가져와 BeautifulSoup으로 파싱
html = browser.page_source
soup = BeautifulSoup(html, 'html.parser')
videos = soup.select("ytd-video-renderer")

# 정보 추출
for i, video in enumerate(videos, 1):
    title = video.select_one("#video-title").text.strip()
    metadata = video.select_one("#metadata-line")
    views = metadata.find_all("span")[0].text.strip() if metadata else "조회수 0회"
    date = metadata.find_all("span")[1].text.strip() if metadata else "날짜 없음"
    
    # 각 영상의 URL 가져오기
    video_url = video.select_one("#video-title").get("href", "")
    full_url = f"https://www.youtube.com{video_url}"

    
    print(title, views, date, full_url)
    ws.append([i, title, views, date, full_url])

# 브라우저 종료
browser.quit()

# 엑셀 파일 저장
wb.save(f"{keyword}_유튜브_검색결과.xlsx")