인터넷 연결이 안돼요 선생님
391
작성한 질문수 30
선생님, proxy 정보를 가져오는거까진 잘되는데, 해당 프록시로 접속하면 인터넷이 되질 않아요
# 가져온 프록시 데이터
# 프록시 이용하여 브라우저 열기
let proxies = await page.evaluate((proxyClass) => {
const ips = Array.from(document.querySelectorAll(proxyClass.ip)).map(ip => ip.textContent.replace(/document\.write\(.+\)/, ''));
const types = Array.from(document.querySelectorAll(proxyClass.type)).slice(5).map(type => type.textContent);
const speeds = Array.from(document.querySelectorAll(proxyClass.speed)).map(speed => parseFloat(speed.textContent));
return ips.map((ip, index) => {
return {
ip: ip,
type: types[index],
speed: speeds[index]
}
});
}, proxyClass);
proxies = proxies.filter(proxy => proxy.type.startsWith('HTTP')).sort((a,b) => a.speed - b.speed);
await page.close();
await browser.close();
console.log(proxies[0]);
console.log(proxies);
browser = await puppeteer.launch({
headless: headless,
args: ["--window-size=1920,1080", '--disable-notifications', "--no-sandbox", `--proxy-server=${proxies[0].ip}`, "--ignore-certificate-errors"]
});
page = await browser.newPage();
await page.waitFor(1000000);
# 브라우저를 열고 검색한 결과
답변 1
0
프록시 주소가 실제로 동작하는 주소인지 체크해보아야 하고(가끔씩 저 리스트에 있어도 안 되는 주소도 존재합니다) 네이버에서 저 주소로 접근하는 것을 막은 것은 아닌지 체크해보아야 합니다.
headless 궁금한게 있어요!
0
413
2
6강 프록시 서버 테스트 관련하여
0
338
2
페이스북 로그인 로그아웃 자동화관련
0
276
2
3-2 axios로 이미지 저장하기에서 axios 관련 오류..
0
269
2
3-1 이미지 다운로드 준비하기 에서 선택자 구성 질문
0
250
3
2-4 csv 출력하기에서 오류 발생
0
294
3
try-puppeteer.appspot.com 을 사용할 수 없나요?
0
151
1
크롬 확장프로그램 관련 질문드립니다.
0
169
1
크롤링 자바스크립트 exe파일
0
554
1
puppeteer 관련
0
598
2
6-3 proxy-database 관련
1
287
1
크롤링을 여러개 돌리려면 어떠한 방법을 선택하는게 좋을까요?
0
793
1
네이버 영화 평점 크롤링 (axis cheerio)
1
488
1
아래 noscript 내용입니다.
0
528
1
크롤링
0
375
1
앱 크롤링
0
1783
1
페이스북 로그인
0
544
1
2019년도 영상이라 error가 나는 걸까요? 2-4. csv에 출력하기에서 error
1
461
1
안녕하세요! for of와 Promise.all 차이점에 관해서 질문드려요!
0
440
2
대량 요청 처리 방법
0
463
1
구글 패스워드 자동입력시 오류
0
249
1
반복크롤링 할 때 아래 질문주신분 하고 약간 형태가 달라요
0
364
2
인스타그램 돔의 value 값으로 쿼리셀렉터 찾을 수 있나요?
0
300
1
페이스북 로그인시 돔이 생성 안되는 문제
0
309
1





