44,000원
다른 수강생들이 자주 물어보는 질문이 궁금하신가요?
- 미해결따라하며 익히는 크롤링 마스터 with데이터공방
크롤링 페이지 접속 에러
# '접속' url = 'https://www.naver.com/' browser.get(url) 이라고 할 경우 아래 사진과 같이 오류가 발생하게 되는데, 어떻게 해결할 수 있나요 ?
- 미해결따라하며 익히는 크롤링 마스터 with데이터공방
넷플릭스 크롤링 데이터 엑셀파일저장
! pip install selenium from selenium import webdriver browser = webdriver.Chrome('c:/인프라수업자료/chromedriver') url = 'https://www.netflix.com/kr/browse/genre/839338' browser.get(url) html = browser.page_source from bs4 import BeautifulSoup soup = BeautifulSoup(html,'html.parser') section_list = soup.select('section') results = [] for section in section_list: section_title = section.select('h2')[0].text program_list = section.select('li') for program in program_list: program_title = program.select('span.nm-collections-title-name')[0].text program_img = program.select('img')[0]['src'] program_link = program.select('a')[0]['href'] data = [section_title,program_title, program_img, program_link] results.append(data) import pandas as pd df = pd.DataFrame(results) df.columns = ['카테고리', '프로그램명', '이미지', '링크'] df.to_excel('c:/인프라수업자료/엑셀파일저장하기.xlsx') section_title설정해줄 때 [0].text를 해줬는데도 엑셀파일 상에서 카테고리명이 저렇게 나타나요. 그리고 데이터 이미지도 일부분은 주소가 잘 써져있는데 일부분은 저렇게 나타나는데 왜그럴까요..??
- 미해결따라하며 익히는 크롤링 마스터 with데이터공방
넷플릭스 크롤링
넷플릭스 크롤링 시스템 만들 때 섹션별로 영화 제목 따내는 거는 아무 오류 없었는데 섹션리스트 중에서 첫번째 섹션에서 프li태그 이용해서 프로그램 이미지랑 제목 html로 따낼 때 section_list = soup.select('section') section = section_list[1] program_list = section.select('li') for program in program_list: print(program.txt) 이렇게 했더니 결과가 None으로 여러개가 계속 나와요 뭐가 문제일까요??
- 미해결따라하며 익히는 크롤링 마스터 with데이터공방
유튜브 크롤링 방법
강의와 관련있는 질문을 남겨주세요.• 강의와 관련이 없는 질문은 지식공유자가 답변하지 않을 수 있습니다. (사적 상담, 컨설팅, 과제 풀이 등)• 질문을 남기기 전, 비슷한 내용을 질문한 수강생이 있는지 먼저 검색을 해주세요. (중복 질문을 자제해주세요.)• 서비스 운영 관련 질문은 인프런 우측 하단 ‘문의하기’를 이용해주세요. (영상 재생 문제, 사이트 버그, 강의 환불 등) 질문 전달에도 요령이 필요합니다.• 지식공유자가 질문을 좀 더 쉽게 확인할 수 있게 도와주세요.• 강의실 페이지(/lecture) 에서 '질문하기'를 이용해주시면 질문과 연관된 수업 영상 제목이 함께 등록됩니다.• 강의 대시보드에서 질문을 남길 경우, 관련 섹션 및 수업 제목을 기재해주세요. • 수업 특정 구간에 대한 질문은 꼭 영상 타임코드를 남겨주세요! 구체적인 질문일수록 명확한 답을 받을 수 있어요.• 질문 제목은 핵심 키워드를 포함해 간결하게 적어주세요.• 질문 내용은 자세하게 적어주시되, 지식공유자가 답변할 수 있도록 구체적으로 남겨주세요.• 정확한 질문 내용과 함께 코드를 적어주시거나, 캡쳐 이미지를 첨부하면 더욱 좋습니다. 기본적인 예의를 지켜주세요.• 정중한 의견 및 문의 제시, 감사 인사 등의 커뮤니케이션은 더 나은 강의를 위한 기틀이 됩니다. • 질문이 있을 때에는 강의를 만든 지식공유자에 대한 기본적인 예의를 꼭 지켜주세요. • 반말, 욕설, 과격한 표현 등 지식공유자를 불쾌하게 할 수 있는 내용은 스팸 처리 등 제재를 가할 수 있습니다. 안녕하세요 데이터공방님, 친절하고 유익한 강의 잘 듣고 있습니다. 감사합니다. 인스타그램 크롤링이 도움이 많이 되었는데, 혹시 유튜브 크롤링 강의는 오픈될 예정에 있는지 궁금합니다. 답변주시면 감사하겠습니다.