-
카테고리
-
세부 분야
데이터 수집 · 처리
-
해결 여부
미해결
스파이스 사이트만 접속시 튕김현상이 있어요
23.01.03 22:39 작성 조회수 96
0
const puppeteer = require('puppeteer');
const crawler = async () => {
try {
let browser = await puppeteer.launch({
headless: false,
args: ['--window-size=1920,1080', '--disable-notifications'],
});
let page = await browser.newPage();
await page.setViewport({
width: 1080,
height: 1080,
});
await page.goto('http://spys.one/free-proxy-list/KR/');
} catch (e) {
console.error(e);
}
};
crawler();
아예 이부분만 작성 해 봐도 오류가 떠요
Error: Navigation failed because browser has disconnected!
해당 사이트가 잠깐 나왔다가 디스커넥티드되면서 종료되어져 버려요
다른사이트는 전혀 이상없는데, 위 스파이스 사이트만 접속시 튕김현상이 있어요
답변을 작성해보세요.
0

조현영
지공자23.01.04 01:07
실습을 진행하는 컴퓨터 환경이 어떻게 되나요? 개인의 컴퓨터인가요? 보통 저 에러는 브라우저가 메모리 부족으로 인해 종료되는 경우 발생합니다.

김형
질문자23.01.04 06:50
저도 구글링 해보면서 메모리 부족 발생에 대한 부분은 살짝 봤었는데, 이부분은 의심의 여지가 없이 맥북 최고사양이라 아닐거라고 생각하고 패스했어요
실습하는 컴퓨터 환경은
개인 컴퓨터 맥 프로 m1 메모리 64기가이고, 수업진행시에는 다른 것은 사용하지 않았어요

김형
질문자23.01.04 07:12
하나 특이한건 제가 홈브루 통해 설치한 크로미움으로 작동하지 않는다는 것이에요
홈브루 통해 설치한 크로미움을 삭제해도 노드 npm으로 부터 설치한 퍼페티어에 내장? 되어 있는 크로미움으로 동작하는거 같아요 이부분이 좀 걸리긴 합니다.

김형
질문자23.01.04 07:22
크로미움을 삭제 해도 삭제가 되지 않아요 기존 크로미움에 어떤 문제가 있는거 같아 삭제하고 홈브루 설치를 통해 m1에서도 괜찮은 크로미움을 사용할려고 하는데
퍼페티어 삭제 / 정상 삭제됨
크로미움 삭제 하면 / 버전이 그대로 나오고 삭제가 되지 않네요 ㅠㅠ

김형
질문자23.01.04 07:25
제 컴퓨터에 설치된 크로미움 아이콘도 선생님하고 다른 뭔가 이상한 아이콘 모양이네요..
추가
왼쪽에 제로초님 공지 통해서 설치한 홈브루 크로미움인데, 퍼페티어 실행시 오른쪽 내장? 크로미움 같은걸로만 작동되고 있어요

김형
질문자23.01.04 07:32
애플 실리콘 mac에서 설치할 때
제로초님 공지사항 통해서 설치했더니 m1용 크로미움이 잘 설치된거 같습니다.
다만 퍼페티어 작동시 내장? 크로미움 같은 위 아이콘이 뜨면서 다른 크로미움을 계속 실행 하는데, 이부분 때문에 에러가 나는거 아닌지 의심이 들어요.
일단 홈브류 통해 설치한 제대로된 크로미움 기반으로 크롤링이 되지 않는 부분이 해결이 되지 않아서 추가 테스트를 못 해 보고 있어요..

김형
질문자23.01.04 09:35
x표시로 삭제는 안되지만 설치된 경로를 찾을 수 있어서, 선생님 방금 알려주신 부분에서 힌트를 얻어서 기존 이상한? 크로미움 삭제 성공하고, 새로 설치한 크로미움으로 동작 했어요 감사합니다!
이제 사이트가 꺼지지 않고, 이상한 오류표시는 없어졌어요 역시나 크로미움 문제가 1차적이였어요
답변 1