• 카테고리

    질문 & 답변
  • 세부 분야

    프로그래밍 언어

  • 해결 여부

    미해결

수정된 직방 프로그램에 대해 질문드립니다!

20.03.05 17:10 작성 조회수 151

1

수정된 직방 크롤링 코드를 보며 실습중인데 질문드립니다.

POST하여 PAYLOAD를 넘기고 item_ids를 가져오는 부분까지는 이해했으나

이렇게 나온 item_ids를 넘겨 나온 매물정보는 제가 직방 사이트를 통해서 보는

매물정보랑 너무 다릅니다.

왜 그런가 해서 보았더니 웹브라우저에서 표시되는 지도 크기에 따라 

items들이 전부 바뀌는 것을 확인할 수 있었습니다.

심지어는 개발자 도구를 열때마다 지도가 줄어들어 데이터가 바뀌는 ...ㅜㅜ

이래서 참 제가 원하는 정보를 크롤링을 통해서 뽑아오기가 어렵더군요...

어떻게하면 특정한 창크기에서 나오는 정보를 그대로 크롤링 해올 수 있을까요?

혼자 고민해봤는데 안되어서 여쭙니다. 강의는 정말 잘듣고있습니다!!

답변 1

답변을 작성해보세요.

0

구글 크롬 개발자도구를 사용해서 살펴보시면 웹브라우저에서 표시되는 지도 크기에 따라 geohash 값이 변경되는것을 확인하실 수 있습니다. 이전 수정전 코드에서는 이 지도 표기 영역을 임의로 단순하게 더하기 빼기 형태로 계산하였었으나 현재 수정된 코드에서는 geohash 라는 값을 활용하여 직방이 데이터를 구하는걸 확인 할 수 있습니다.

따라서 웹브라우저에서 지도를 zoom in, out 해보시면 geohash 값이 변경되는것을 확인할 수 있고 이에 따라 api 쿼리를 변경해보시면서 테스트 해보셔야 할듯 합니다. 결국 어떤 geohash 값을 넘기느냐에 따라 직방 데이터가 변경된다는 결론에 이를 수 있으니 이 부분을 집중 분석해보셔야 할듯 합니다.