inflearn logo
강의

講義

知識共有

【新改訂版】これが本当のクローリングだ - 基本編

동적크롤링시 크롬창 꺼짐, 웹드라이버매니저 임포트 불가

4592

ckdgy123

投稿した質問数 10

2

저 동적크롤링할때 크롬창이 잠시 켜졌다가 바로꺼지면서 deprecated에러가 떠서 이전버전(3.x.x)으로 다운을 받았는데도 계속꺼지고 구글링을해보니 웹드라이버 매니저를 임포트해서 하는방법이있던데 임포트도 already satisfied라하고 되질않네요

는데 노란색밑줄이 계속뜨네요.. 어떻게 해결해야하나요

동적웹크롤링 python 웹-크롤링

回答 3

2

startcoding

안녕하세요.

코딩을 가장 쉽게 알려주는 크리에이터, 스타트코딩입니다.

 

selenium 버전이 4버전대로 업데이트 되면서 기존 코드가 제대로 동작하지 않을 수 있습니다.

deprecated 메시지도 뜨고요.

 

새로운 버전에 맞게, 그리고 드라이버 자동업데이트도 적용한 코드를 공유해 드립니다...!

클래스 101 강의에서 사용한 코드인데 

다 공개해 드릴테니 다 가져 가세요ㅎㅎ

 

from selenium import webdriver
from selenium.webdriver.chrome.service import Service
from selenium.webdriver.chrome.options import Options

# 크롬 드라이버 자동 업데이트
from webdriver_manager.chrome import ChromeDriverManager

# 브라우저 꺼짐 방지
chrome_options = Options()
chrome_options.add_experimental_option("detach", True)

# 불필요한 에러 메시지 없애기
chrome_options.add_experimental_option("excludeSwitches", ["enable-logging"])

service = Service(executable_path=ChromeDriverManager().install())
driver = webdriver.Chrome(service=service, options=chrome_options)

# 웹페이지 해당 주소 이동
driver.get("https://www.naver.com")

0

ckdgy123

저 보내주신코드로 수정을했는데도 브라우저창이 바로꺼지는데 혹시나 잘못된게 있는지봐주실수잇나요

0

startcoding

음.. 제 컴퓨터에서는 안꺼지고 잘 동작하는데 이상하네요.

 

[추가로 테스트 해볼 수 있는 것]

1) 아나콘다를 사용하지 않고 파이썬만 설치하기

(아나콘다 및 파이썬 전체 삭제 후, 파이썬만 재설치)

2) vscode 완전 삭제 후, 재설치

3) 아래 링크에서 해결방법 찾아 보기

https://stackoverflow.com/questions/47508518/google-chrome-closes-immediately-after-being-launched-with-selenium/47509389

 

0

ckdgy123

vscode로 실행시

(cakd5) C:\cakd5\workspace\startcoding> c: && cd c:\cakd5\workspace\startcoding && cmd /C "C:\Users\ckdgy\anaconda3\envs\cakd5\python.exe c:\Users\ckdgy\.vscode\extensions\ms-python.python-2022.0.1814523869\pythonFiles\lib\python\debugpy\launcher 50080 -- c:\cakd5\workspace\startcoding\03_네이버_쇼핑_크롤링\01_셀레니움_기초사용법.py "

 

DevTools listening on ws://127.0.0.1:50089/devtools/browser/28963227-4eef-4073-8ea3-31161ccc4483

 

 

에러가뜨네요

0

startcoding

DevTools Listening 은 에러가 아닙니다.

신경 안쓰셔도 됩니다ㅎㅎ 

0

ckdgy123

선생님 방금 주피터노트북으로는 잘켜지네요 그런데 왜 vscode에서는 켜졌다가 바로꺼질까요?vscode로 계속하고있어서 vscode로 실행하고싶네요

Live server 를 이용 해보고 싶은데 확장메뉴 설치가 막혀 있어요

0

62

2

'팀 단위 AI 업무 혁신' 자문 관련하여 문의드리고자 합니다. (연락처 요청)

0

38

1

import requests from bs4 import BeatifulSoup 이 단계에서 안 되네요

0

76

2

requests 관련 질문

1

136

2

설치 관련

0

131

2

vs code 결과출력이 안됩니다

0

143

1

크롤링 관련 질문입니다

0

210

2

word wrap 체크 후에도 콘솔 한줄로 출력되는현상

0

190

1

주피터에서 pip오류가 계속납니다

0

1084

3

강의 "requests, Beautifulsoup4 사용법 빠르게 알아보기"에서 질문이있습니다.

0

170

2

네이버쇼핑 검색창 넘어가기전 팝업창이 안사라져요

0

365

1

html주소를 다른 컴터에서도 접속하기

0

241

2

pandas 설치하는데 오류가 나서요

0

2705

1

실행오류

0

213

1

네이버쇼핑 무한스크롤 안되시는분들 모바일네이버로 실습해보세요

0

263

1

뉴스 페이지에 페이지 번호가 없는데 어떻게 가져오나요?

0

231

2

네이버 쇼핑에 팝업창이 뜨기 시작했어요 도와주세요 ㅠㅠ

0

721

3

셀레니움 실습 시 창이 자동 차단되면서 꺼집니다.

0

663

2

낮은 가격순을 클릭하는 문을 추가하고싶습니다.

0

303

2

pip는 내부 또는 외부명령 ,실행할 수 있는 프로그램

0

3388

2

이런오류는 어떤 오류인가요

0

659

1

창이 두개떠요/쇼핑검색도 안되요 ㅜ

0

333

2

약간 변태(?)같지만 해당 코드를 깔끔하게 함수로 리팩토링해보았습니다

0

338

2

과제 답안을 보지않고 스스로 구글링해서 만든 웹 크롤링 프로그램(10페이지 단위) 코드입니다.

0

757

2