inflearn logo
강의

講義

知識共有

リアルタイムトレンドホームページ開発(Pythonクロール+Flask)

크롤링 관련해서 문의좀 드릴께요~

222

pycoding

投稿した質問数 18

0

안녕하세요. 강사님.

강의와는 상관없을 수 있지만 혼자서 실습하다가 궁금한 부분이 있어서 문의드립니다.

get방식의 json 형태로 제공되는 사이트가 있습니다.

브라우저로 url을 치고 들어가면 json 데이터를 볼 수 있고, 

requests를 통해서 받아올수도 있습니다.

그런데 이상한 것이 크롬브라우저로 접속하거나 requests로 요청하면 특정정보만 누락이 됩니다.

예를들어 인물정보에서 주소영역이 없습니다.

반면에 동일한 url로 에지나 익스플로러로 접속하면 주소영역이 나오고요~

죄송하지만 이런 현상이 발생되는 이유를 아실까요??

python 웹-크롤링

回答 1

0

bokchi

안녕하세요 wonwoo님

크롤링을 이사이트 저사이트 여기저기 하다 보시면 정말 다양한 경우를 많이 보실 겁니다~

말씀하신 경우에 경우 한번 살펴봐야 할 것 같은데 url주소를 남겨주실 수 있으실까요?

교육 자료나 프로그램 소스 위치 알려주세요.

0

147

2

강의 교육자료 변경됨?

0

147

1

[셀레니움 사용해보기]웹 드라이버 경로관련

0

1638

1

[page숫자설정]int(page) 관련문의드립니다.

0

213

1

안녕하세요 강의 정말 잘봤습니다 ㅎㅎ

0

258

1

혹시 외부에서도 웹을 볼 수 있게 작동 하려면 어떻게 해야할까요?

0

242

1

print(soup.select("") 에서 "GET / HTTP/1.1" 500 - 에러 나네요.

0

415

3

엑셀 파일 생성이 안됩니다. ㅠㅠ

0

427

2

소스 올려봅니다

0

301

2

다른 editor 사용해도 되나요?

0

202

1

네이버 쇼핑 핫딜 크롤링 문제

0

395

3

flask에서 html 연결이 안됩니다ㅠㅜ

0

501

1

index.html 부분을 인식을 못하네요

0

463

5

저는 네이버 인기 검색어를 가져올려고하는데 못뽑아 오네요 혹시 네이버 보안 문제일까요???

1

199

1

Flask 실행하면 웹사이트 127.0.0.1:5000 포트 부분에서 404에러가 뜨네요 어떻게 해야되나요??

0

6305

6

저는 이렇게 venv부분이 다른 색으로 뜨는데 무슨 차이인가요??

0

400

1

윈도우 PyCharm 환경 설정들 처음부터 알려주세요

0

294

1

실시간

0

281

1

아톰에서 실행

0

324

1

실행결과가 이상합니다 실시간 순위 1위만 뜨네요

0

390

6

코드가 잘안보이는건 wifi환경이라 그런건가요

0

166

1

크롤링 결과를 html 페이지에서 출력할 수 없습니다.

0

277

2

크롤링 결과가 다른 페이지가 아닌 현재 페이지에 나타나게 하려면 어떻게 해야 하나요?

0

321

2

크롤링 오류입니다;

1

419

2