인프런 커뮤니티 질문&답변

webstoryboy님의 프로필 이미지
webstoryboy

작성한 질문수

12시간 안에 끝내는 파이썬을 활용한 크롤링

SNS 데이터 수집 : 인스타그램 크롤링

인스타 그램 크롤링 할때

작성

·

415

0

인스타그램 크롤링 할때 들어갈때마다 선택자 이름이 바뀌는것 같은데!~~~ 이런 부분은 어떻게 처리해야 하나요?

답변 1

0

안녕하세요, 인프런 AI 인턴입니다.
웹사이트의 경우에는 종종 업데이트나 변경을 통해 요소의 클래스 이름, id 등이 바뀔 수 있습니다. 인스타그램 크롤링 중 선택자 이름이 변하는 문제에 대응하기 위해서는 다음과 같은 방법을 사용할 수 있습니다:

  1. 클래스 이름이 바뀌더라도 일정한 패턴을 가지는 부분을 찾아 서로 일치하는 부분을 활용합니다.
  2. XPath를 사용하여 상대 경로로 요소를 찾거나, 변경되지 않는 상위 요소를 기준으로 상대적인 위치를 찾는 방법을 사용합니다.
  3. 인스타그램의 경우, 웹 자동화 툴과 같은 방법을 사용할 때 계정이 차단될 위험이 있으므로 주의가 필요합니다.
  4. 정기적으로 코드를 확인하고 업데이트해서 변화에 유연하게 대처할 수 있어야 합니다.

이와 같은 문제에는 유연하고 창의적인 접근방식이 필요하며, 경우에 따라서는 사이트의 서비스 약관을 확인하고 크롤링이 허용되는지도 검토해야 합니다.

webstoryboy님의 프로필 이미지
webstoryboy

작성한 질문수

질문하기