inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

파이썬 입문 및 웹 크롤링을 활용한 다양한 자동화 어플리케이션 제작하기

requests 통신 실습(로그인 처리) 고급(1) - 루리웹, 인프런

chrome > network > preview 질문있습니다.

950

_ LFED

작성한 질문수 1

0

안녕하세요. 강의 잘봤습니다.영상을 보면서 따라해봤는데.. 제가 하려는거와 좀 다른 부분이 있어서 질문드립니다.

서치라는 부분을 눌러서 'header'값을 확인해보면 'payload'값이 있는데 제가 생각하기에는 가장 유력하게 접근할 수 있는 단서일듯싶은데 접근할 수 있는 방법에 대해 도무지 찾을 수 없고 응용도 되지않네요ㅠㅠ

최종적으로 원하는것은 preview에 있는 데이터를 갖고오는것입니다.

제가 진행하려는 url은 스토어팜 입니다.

path를 확인해보니 api?로 확인되는데.. 뭔가 점점 더 어려워지네요ㅠㅠ

일단, 저는

셀레니움을 통해 로그인 > 원하는 상품 카테고리 검색 및 검색한 URL을 확인하는데까지는 갈 수 있는데 거기서 개발자내용을 보니 'serch'라는 부분에 제가 원하는 데이터가 모두 모여 있었습니다.

그리고

페이로드에서 'page=0' 이 부분이 증가할수록 페지가 넘어가 계속 새로운것이 나오는것으로 확인되는데..

참으로 쉽지 않네요ㅠㅠ

어떻게접근하면 좋을까요?

웹-크롤링 python

답변 1

0

좋은사람

안녕하세요. 열심히 하시네요.

response 에 데이터를 확인해 보셔도 되고

fiddler 라는 프로그램을 깔면 좀 더 세밀하게 response 데이터를 확인하실 수 있습니다.

현재 예제에서 error 발생

0

367

3

유튜브 동영상 다운로드

0

1447

2

Atom 에디터 관련

0

337

1

위시켓 폼데이터

0

274

1

스케줄러 사용 관련 질문 드립니다

0

627

1

selenium 에러

0

428

1

Progress bar 쓰레드 관련

0

489

1

Install Package 관련 문의

0

328

1

tkinter 샘플 코드 실행 오류 건

0

1267

1

4-7-6 네이버 & 카카오 주식 정보 가져오기

0

381

1

네이버자동로그인_by_selenium

0

875

1

위시캣 로그인 처리 및 크롤링 질문

0

344

1

2-8-1 네이버이미지 크롤링 질문

1

604

3

li:nth-of-type 질문

0

350

2

에러가 뜨는데 잘 모르겠어요ㅠ

0

401

2

Install Packages 항목이 안보이는 이유가 뭘까요?

0

400

2

환경변수 Path 설정 방법

0

631

1

웹 브라우저 없는 스크랩핑 및 파싱 실습(1) - 인프런

0

333

1

웹 브라우저 없는 스크랩핑 및 파싱 실습(1) -git주소

0

475

3

download2-8-1. py질문

0

203

1

ip 차단 당하는 거 같은데 아무리 랜덤주고, sleep 줘도 안 되는데 다른 방법 더 있을까요??

0

645

1

인프런 환경이 바뀌어서 제나름대로 하는데

0

196

1

다시올려주신 예제파일로하는데

0

190

1

아직도 에러가뜨나보네요?

0

584

1