inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

남박사의 파이썬 기초부터 실전 100% 활용

[삭제예정] 네이버 실시간 검색어 크롤링 하기

ajax 통신 방식으로 바뀌었을때 대처법을 알고싶습니다.

289

복회장

작성한 질문수 2

1

선생님이 수정해주신 네이버검색어 신규코드를 보면 

아래와같이 표시되는데요 아래의 링크를 어떻게 가져온것인지 궁금합니다. 저도 다른 사이트에서 통신방식이 바뀌었을때 대처하려구요

json = requests.get('https://www.naver.com/srchrank?frm=main').json()

웹-크롤링 python

답변 2

0

복회장

네 감사합니다~!

0

남박사

결국 저도 브라우저의 개발자모드에서 사이트를 분석하는 방법외에 더 다른 방법을 사용하지는 않습니다. 다만 웹사이트를 많이 만들어보면 대략 어떻게 만들겠구나 하는 정도의 감이 생기는건 사실입니다. 그래서 웹 크롤링을 하는 분들께 웹사이트를 한번이상은 만들어보는걸 추천드리는 편입니다.

예를 들어 오늘자 실시간 검색어를 보자면 9위에 있는 "트럼프" 단어를 search 하면 api 주소가 검색 결과로 나오는걸 볼 수 있습니다. 물론 이렇게 쉽게 해결되는 경우도 있지만 그렇지 않는 경우가 더 많기도 합니다. 최악의 경우에는 사이트에서 사용되는 js 파일들을 하나하나 열어서 분석해봐야 하는 경우도 있습니다.

38강 = 연산자 더하고 빼기

0

60

2

주석처리

0

116

1

함수의 파라미터값 msg

0

155

1

강의자료 이미지 안나옴

0

239

3

강의자료 질문 두번째

0

165

3

강의자료 관련 질문

0

116

1

파이썬 예외 처리 try / except 파일 처리 코드가 실행이 안됩니다.

0

235

1

소수 너무 어려워요

0

245

1

imagefont 함수 사용

0

239

1

pylint

0

357

1

add 함수 문의 ㅠㅠ

0

283

1

형식 문의드립니다.

0

209

1

변수 명을 왜 src, tar로 하셨는지 궁금합니다.

0

602

1

숫자야구 코드를 짜 봤는데 뭔가 이상합니다.

0

253

1

zsh: command not found: pylint

0

269

1

텔레그램 봇 만들기 코드 실행이 안됩니다 박사님..ㅠ

0

546

1

질문드립니다.

1

374

2

list.reverse() 출력에 대해서 질문있습니다.

1

433

1

데코레이터 함수 및 동작시간 질문입니다.~

1

323

2

opencv 사용하면서 궁금한점 (해상도)

1

781

1

질문드립니다.

1

299

1

아래 오류가 뜨면서 vscode가 컴파일이 되지 않는데.. 혹시 왜이럴까요?

1

445

1

크롤링안되는 현상 문의 드립니다.

1

421

1

파이썬 크롤링 관련 문의

1

277

1