구글플레이 리뷰 크롤링

Question

안녕하세요 코코님, 코코님 강의 덕분에 웹크롤링 입문에 이어 시각화까지 수강중에 있습니다. 한가지 여쭤볼게 있습니다:) 현 강의에서는 dc인사이드, 클리앙 등 페이지가 뒤로 넘어가는 웹페이지 크롤링을 알려주셨는데요! 제가 한 회사의 면접을 앞두고 구글플레이 앱 리뷰를 크롤링하여 시각화하고자 하다보니 이 경우에는 어떻게 리뷰 글을 크롤링할지 모르곘더라구요 ㅠㅠ 페이지 넘버가 없고 한페이지에 모든 리뷰가 스크롤 내릴떄마다 나와서 헷갈립니다. 페이지소스로 리뷰글들을 보다보면 공통되는 규칙이 안보이네요 ㅠㅠ 페이지 캡쳐해서 같이 첨부드립니다. (https://play.google.com/store/apps/details?id=com.percent.royaldice&hl=ko&gl=US&showAllReviews=true) 답변 주시면 적용시켜 시도해보겠습니다! 감사합니다.

coco · Answer

안녕하세요.  byunghun88님 구글 플레이의 리뷰같은 경우는 셀레늄을 이용해야 가능할 것으로 보입니다. 마우스를 내리면서 리뷰가 계속 보이는 형태를 띄고 있는데 셀레늄의 PageDown 키 등을 이용하여 수집해야 할 것 같습니다.