크롤링 관련해서 문의좀 드릴께요~
220
18 asked
안녕하세요. 강사님.
강의와는 상관없을 수 있지만 혼자서 실습하다가 궁금한 부분이 있어서 문의드립니다.
get방식의 json 형태로 제공되는 사이트가 있습니다.
브라우저로 url을 치고 들어가면 json 데이터를 볼 수 있고,
requests를 통해서 받아올수도 있습니다.
그런데 이상한 것이 크롬브라우저로 접속하거나 requests로 요청하면 특정정보만 누락이 됩니다.
예를들어 인물정보에서 주소영역이 없습니다.
반면에 동일한 url로 에지나 익스플로러로 접속하면 주소영역이 나오고요~
죄송하지만 이런 현상이 발생되는 이유를 아실까요??
Answer 1
0
안녕하세요 wonwoo님
크롤링을 이사이트 저사이트 여기저기 하다 보시면 정말 다양한 경우를 많이 보실 겁니다~
말씀하신 경우에 경우 한번 살펴봐야 할 것 같은데 url주소를 남겨주실 수 있으실까요?
교육 자료나 프로그램 소스 위치 알려주세요.
0
145
2
강의 교육자료 변경됨?
0
146
1
[셀레니움 사용해보기]웹 드라이버 경로관련
0
1636
1
[page숫자설정]int(page) 관련문의드립니다.
0
213
1
안녕하세요 강의 정말 잘봤습니다 ㅎㅎ
0
257
1
혹시 외부에서도 웹을 볼 수 있게 작동 하려면 어떻게 해야할까요?
0
240
1
print(soup.select("") 에서 "GET / HTTP/1.1" 500 - 에러 나네요.
0
414
3
엑셀 파일 생성이 안됩니다. ㅠㅠ
0
425
2
소스 올려봅니다
0
299
2
다른 editor 사용해도 되나요?
0
200
1
네이버 쇼핑 핫딜 크롤링 문제
0
393
3
flask에서 html 연결이 안됩니다ㅠㅜ
0
498
1
index.html 부분을 인식을 못하네요
0
461
5
저는 네이버 인기 검색어를 가져올려고하는데 못뽑아 오네요 혹시 네이버 보안 문제일까요???
1
196
1
Flask 실행하면 웹사이트 127.0.0.1:5000 포트 부분에서 404에러가 뜨네요 어떻게 해야되나요??
0
6299
6
저는 이렇게 venv부분이 다른 색으로 뜨는데 무슨 차이인가요??
0
398
1
윈도우 PyCharm 환경 설정들 처음부터 알려주세요
0
293
1
실시간
0
279
1
아톰에서 실행
0
323
1
실행결과가 이상합니다 실시간 순위 1위만 뜨네요
0
388
6
코드가 잘안보이는건 wifi환경이라 그런건가요
0
165
1
크롤링 결과를 html 페이지에서 출력할 수 없습니다.
0
276
2
크롤링 결과가 다른 페이지가 아닌 현재 페이지에 나타나게 하려면 어떻게 해야 하나요?
0
319
2
크롤링 오류입니다;
1
416
2