inflearn logo
강의

講義

知識共有

12時間で終わるPythonを活用したクロール

SNSデータ収集:Instagramのクロール

인스타 그램 크롤링 할때

922

webstoryboy

投稿した質問数 1

0

인스타그램 크롤링 할때 들어갈때마다 선택자 이름이 바뀌는것 같은데!~~~ 이런 부분은 어떻게 처리해야 하나요?

python 웹-크롤링

回答 1

0

communityai8509

안녕하세요, 인프런 AI 인턴입니다.
웹사이트의 경우에는 종종 업데이트나 변경을 통해 요소의 클래스 이름, id 등이 바뀔 수 있습니다. 인스타그램 크롤링 중 선택자 이름이 변하는 문제에 대응하기 위해서는 다음과 같은 방법을 사용할 수 있습니다:

  1. 클래스 이름이 바뀌더라도 일정한 패턴을 가지는 부분을 찾아 서로 일치하는 부분을 활용합니다.
  2. XPath를 사용하여 상대 경로로 요소를 찾거나, 변경되지 않는 상위 요소를 기준으로 상대적인 위치를 찾는 방법을 사용합니다.
  3. 인스타그램의 경우, 웹 자동화 툴과 같은 방법을 사용할 때 계정이 차단될 위험이 있으므로 주의가 필요합니다.
  4. 정기적으로 코드를 확인하고 업데이트해서 변화에 유연하게 대처할 수 있어야 합니다.

이와 같은 문제에는 유연하고 창의적인 접근방식이 필요하며, 경우에 따라서는 사이트의 서비스 약관을 확인하고 크롤링이 허용되는지도 검토해야 합니다.

작업형2 카테고리

0

3

1

110강 회귀_8번 문의

0

8

2

XGBRegressor 학습 시 warning 출력

0

11

2

LLM판단에 문제가 있는 것 같습니다

0

5

1

데이터 프레임을 변경해도 되나요?

0

9

2

10회 기출 작업형3 문제 2-1 질문

0

14

2

작업형 2 질문

0

13

2

62강 노션 링크 사용권한 승인 부탁드립니다.

0

9

2

62강 노션 링크 사용권한 승인 부탁드립니다.

0

10

1

작업형 2 템플릿 확인 요청

0

12

2

교육자료가 너무 오래되어서 지시한대로 진행하려 해도 안됩니다.

0

26

1

reg.get("http://www.naver.com")

0

51

2

VS로 수강 중인 수강생

0

54

1

네이버 페이지 데이터 수집 실습에서 a.nav가 안되요ㅠ

0

89

1

궁금증

0

101

1

Beautifulsoup실습도중 발생한 문제

0

158

1

selenium 버전이 4.x 대가 되면서 메서드가 달라졌고, 크롬드라이버 다운도 방식이 달라졌습니다(24.09.07 기준)

1

285

1

수업중 따라하기 오류 ㅠㅠ

0

253

2

req.get("http://www.naver.com) 입력후 "Response[200]" 이라고 나오지 않네요 ㅠㅠ

0

190

1

질문

0

320

1

셀레니움 변경사항 입니다.

0

282

0

동영상안에

0

256

0

코스피거래상위종목 수집 강의에서 nth-child 결과 질문입니다

0

648

1

질문이 있습니다.

0

297

1