inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

12시간 안에 끝내는 파이썬을 활용한 크롤링

SNS 데이터 수집 : 인스타그램 크롤링

인스타 그램 크롤링 할때

895

webstoryboy

작성한 질문수 1

0

인스타그램 크롤링 할때 들어갈때마다 선택자 이름이 바뀌는것 같은데!~~~ 이런 부분은 어떻게 처리해야 하나요?

python 웹-크롤링

답변 1

0

인프런 AI 인턴

안녕하세요, 인프런 AI 인턴입니다.
웹사이트의 경우에는 종종 업데이트나 변경을 통해 요소의 클래스 이름, id 등이 바뀔 수 있습니다. 인스타그램 크롤링 중 선택자 이름이 변하는 문제에 대응하기 위해서는 다음과 같은 방법을 사용할 수 있습니다:

  1. 클래스 이름이 바뀌더라도 일정한 패턴을 가지는 부분을 찾아 서로 일치하는 부분을 활용합니다.
  2. XPath를 사용하여 상대 경로로 요소를 찾거나, 변경되지 않는 상위 요소를 기준으로 상대적인 위치를 찾는 방법을 사용합니다.
  3. 인스타그램의 경우, 웹 자동화 툴과 같은 방법을 사용할 때 계정이 차단될 위험이 있으므로 주의가 필요합니다.
  4. 정기적으로 코드를 확인하고 업데이트해서 변화에 유연하게 대처할 수 있어야 합니다.

이와 같은 문제에는 유연하고 창의적인 접근방식이 필요하며, 경우에 따라서는 사이트의 서비스 약관을 확인하고 크롤링이 허용되는지도 검토해야 합니다.

Sonauto V2 text to audio

0

10

1

Part2 자료에 대한 질문입니다.

0

8

1

시계열 데이터 날짜와 시간 format

0

14

1

자동화 프로그램 프로젝트

0

15

1

도커 컨테이너 생성 과정 오류 질문입니다.

0

29

2

평가지표 F1 스코어 질문드립니다.

0

16

2

강의 일정

0

26

2

replit에서 developer frameworks가 안보여요

0

16

2

Notion 권한 승인 요청 드립니다.

0

21

1

가상환경 설정시 문의

0

24

2

교육자료가 너무 오래되어서 지시한대로 진행하려 해도 안됩니다.

0

19

1

reg.get("http://www.naver.com")

0

38

2

VS로 수강 중인 수강생

0

43

1

네이버 페이지 데이터 수집 실습에서 a.nav가 안되요ㅠ

0

84

1

궁금증

0

91

1

Beautifulsoup실습도중 발생한 문제

0

149

1

selenium 버전이 4.x 대가 되면서 메서드가 달라졌고, 크롬드라이버 다운도 방식이 달라졌습니다(24.09.07 기준)

1

270

1

수업중 따라하기 오류 ㅠㅠ

0

241

2

req.get("http://www.naver.com) 입력후 "Response[200]" 이라고 나오지 않네요 ㅠㅠ

0

181

1

질문

0

316

1

셀레니움 변경사항 입니다.

0

277

0

동영상안에

0

251

0

코스피거래상위종목 수집 강의에서 nth-child 결과 질문입니다

0

637

1

질문이 있습니다.

0

291

1