inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

Node.js로 웹 크롤링하기

puppeteer 관련

599

lloll

작성한 질문수 3

0

headless : false 로 설정해서 실행을 하면...

생각보다 자주 크로니움이 많이 튕기며 오류를 발생시킵니다.

puppeteer 와 puppeteer-core 업데이트도 진행했고, 크롬브라우져도 최신버젼을 사용하고 있습니다.

혹시 팁있을까요?

javascript node.js 웹-크롤링 puppeteer

답변 2

0

lloll

image

0

lloll

이 오류가 엄청 자주 떠요.. ㅠㅠ

0

제로초(조현영)

headless가 아닐 때는 안 뜨는게 맞나요? 이건 주로 설정 실수나 코드에서 await 안하거나 해서 주로 발생하거든요

0

제로초(조현영)

혹시 어떤 에러가 발생하나요??

0

lloll

headless : true 로 해도 떠요..

가끔 Error: Protocol error (Runtime.evaluate): Target closed. 이런 에러도 뜨구요.

파이썬 셀레니움은 이런 오류 본적이 없는데...

puppeteer 는 생각보다 오류가 많아요.. 물론 제가 부족한 거겠지만..

 

0

제로초(조현영)

네 코딩을 잘못하셨을 확률이 높습니다. 비동기 코드를 정확하게 순서를 지키지 않았다거나 한 경우입니다.

0

제로초(조현영)

자바스크립트 특성을 정확하게 이해하지 않고 코딩하면 문제가 될 수 있습니다.

0

lloll

아.. 제가 코딩한게 될 때도 있는데.. 그래도 코딩이 잘못됐을 확률이 높나요? 대략 10번중 3~4번은 오류로 중간에 멈추더라구요. 감사합니다. 더 살펴보겠습니다.

0

제로초(조현영)

네 혹시 중간에 await 빠뜨리신 건 없나요?

headless 궁금한게 있어요!

0

414

2

6강 프록시 서버 테스트 관련하여

0

339

2

페이스북 로그인 로그아웃 자동화관련

0

277

2

3-2 axios로 이미지 저장하기에서 axios 관련 오류..

0

269

2

3-1 이미지 다운로드 준비하기 에서 선택자 구성 질문

0

250

3

2-4 csv 출력하기에서 오류 발생

0

294

3

try-puppeteer.appspot.com 을 사용할 수 없나요?

0

151

1

크롬 확장프로그램 관련 질문드립니다.

0

169

1

크롤링 자바스크립트 exe파일

0

555

1

6-3 proxy-database 관련

1

288

1

크롤링을 여러개 돌리려면 어떠한 방법을 선택하는게 좋을까요?

0

794

1

네이버 영화 평점 크롤링 (axis cheerio)

1

489

1

아래 noscript 내용입니다.

0

528

1

크롤링

0

377

1

앱 크롤링

0

1783

1

페이스북 로그인

0

544

1

2019년도 영상이라 error가 나는 걸까요? 2-4. csv에 출력하기에서 error

1

461

1

안녕하세요! for of와 Promise.all 차이점에 관해서 질문드려요!

0

440

2

대량 요청 처리 방법

0

464

1

구글 패스워드 자동입력시 오류

0

250

1

반복크롤링 할 때 아래 질문주신분 하고 약간 형태가 달라요

0

366

2

인스타그램 돔의 value 값으로 쿼리셀렉터 찾을 수 있나요?

0

300

1

페이스북 로그인시 돔이 생성 안되는 문제

0

310

1

hyperfreed_story_id 사용불가라 태그가 많이 바뀌어서

0

344

1