ooenqn

자꾸 에러가 납니다.

<p>동영상 후반부에 user agent 추가 하는거 나오네요...</p>

이미 누군가가 질문을 하셨는데...

<p>user agent 추가 했더니 크롤링 잘되네요....</p>
<p>이런 문제점? 을 어떻게 찾아야되는건가요?...</p>

<p>f5랑<br />초록색깔 삼각형 이랑<br />다른 명령 하는 건가요?</p>
<p>초록색깔 누르면 되긴하는데<br />무조건 되는건 아니고<br />100번시도하면 99번은 멈추고 한번 되는느낌?</p>

<div style="color: #d4d4d4; background-color: #1e1e1e; font-family: Consolas, 'Courier New', monospace; font-size: 15px; line-height: 20px; white-space: pre;">
<div><span style="color: #c586c0;">import</span>&nbsp;requests</div>
<div><span style="color: #c586c0;">from</span>&nbsp;bs4&nbsp;<span style="color: #c586c0;">import</span>&nbsp;BeautifulSoup</div>
<br />
<div>url&nbsp;=&nbsp;<span style="color: #ce9178;">"https://www.coupang.com/np/search?q=%EB%85%B8%ED%8A%B8%EB%B6%81&channel=user&component=&eventCategory=SRP&trcid=&traid=&sorter=scoreDesc&minPrice=&maxPrice=&priceRange=&filterType=&listSize=36&filter=&isPriceRange=false&brand=&offerCondition=&rating=0&page=3&rocketAll=false&searchIndexingToken=1=4&backgroundColor="</span></div>
<div>res&nbsp;=&nbsp;requests.get(url)</div>
<div>res.raise_for_status()</div>
<div>soup&nbsp;=&nbsp;BeautifulSoup(res.text,&nbsp;<span style="color: #ce9178;">"lxml"</span>)</div>
<br />
<div><span style="color: #569cd6;">print</span>(res.text)</div>
<div></div>
<div></div>
<div>제가 작성한 코드입니다</div>
</div>

<p>멈춰서 "실행 종료" 후<br />다시 시도하다가 를 반복하다보면</p>
<p>어쩌다가</p>
<p>가저오긴하는데 다른 결과를 가져오는데요...</p>
<p></p>

<p>다시 시도했는데 저기서 멈춰요</p>

<p>터미널에서 "python" 입력 후<br />>>> 이상태에서<br /><br />한줄씩 입력하면 선생님과 동일하게 웹 클롤링 성공 합니다</p>
<p></p>

ooenqn

Posts