inflearn logo
강의

講義

知識共有

12時間で終わるPythonを活用したクロール

SNSデータ収集:Instagramのクロール

인스타 그램 크롤링 할때

908

webstoryboy

投稿した質問数 1

0

인스타그램 크롤링 할때 들어갈때마다 선택자 이름이 바뀌는것 같은데!~~~ 이런 부분은 어떻게 처리해야 하나요?

python 웹-크롤링

回答 1

0

communityai8509

안녕하세요, 인프런 AI 인턴입니다.
웹사이트의 경우에는 종종 업데이트나 변경을 통해 요소의 클래스 이름, id 등이 바뀔 수 있습니다. 인스타그램 크롤링 중 선택자 이름이 변하는 문제에 대응하기 위해서는 다음과 같은 방법을 사용할 수 있습니다:

  1. 클래스 이름이 바뀌더라도 일정한 패턴을 가지는 부분을 찾아 서로 일치하는 부분을 활용합니다.
  2. XPath를 사용하여 상대 경로로 요소를 찾거나, 변경되지 않는 상위 요소를 기준으로 상대적인 위치를 찾는 방법을 사용합니다.
  3. 인스타그램의 경우, 웹 자동화 툴과 같은 방법을 사용할 때 계정이 차단될 위험이 있으므로 주의가 필요합니다.
  4. 정기적으로 코드를 확인하고 업데이트해서 변화에 유연하게 대처할 수 있어야 합니다.

이와 같은 문제에는 유연하고 창의적인 접근방식이 필요하며, 경우에 따라서는 사이트의 서비스 약관을 확인하고 크롤링이 허용되는지도 검토해야 합니다.

1-3번문제 질문

0

6

1

질문이 있습니다.

0

12

1

회귀모델 평가지표 최근 시험환경에서의 지원여부가 궁금합니다

0

9

1

컬럼 삭제 관련

0

8

1

레이블 인코딩과 원핫 인코딩

0

17

2

안녕하세요? 섹션14는 강의가 언제부터 올라오나요? 너무나 궁금하고 기대가 됩니다~ ^^

0

16

1

포인터 질문

0

24

2

검정결과 질문(채택/기각)

0

23

2

마인드맵에서 암기해야할 내용은 별마크 인가요

0

28

2

n8n 사용 목적

0

25

1

교육자료가 너무 오래되어서 지시한대로 진행하려 해도 안됩니다.

0

21

1

reg.get("http://www.naver.com")

0

42

2

VS로 수강 중인 수강생

0

48

1

네이버 페이지 데이터 수집 실습에서 a.nav가 안되요ㅠ

0

84

1

궁금증

0

93

1

Beautifulsoup실습도중 발생한 문제

0

152

1

selenium 버전이 4.x 대가 되면서 메서드가 달라졌고, 크롬드라이버 다운도 방식이 달라졌습니다(24.09.07 기준)

1

278

1

수업중 따라하기 오류 ㅠㅠ

0

246

2

req.get("http://www.naver.com) 입력후 "Response[200]" 이라고 나오지 않네요 ㅠㅠ

0

183

1

질문

0

317

1

셀레니움 변경사항 입니다.

0

280

0

동영상안에

0

252

0

코스피거래상위종목 수집 강의에서 nth-child 결과 질문입니다

0

639

1

질문이 있습니다.

0

293

1