inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

내 업무를 대신 할 파이썬(Python) 웹크롤링 & 자동화 (feat. 주식, 부동산 데이터 / 인스타그램)

네이버 금융 일별 시세 데이터 크롤링 문의드립니다.(iframe 관련)

728

gaol.sgkb

작성한 질문수 2

0

안녕하세요 좋은 강의 잘 듣고 있습니다.
 
네이버 금융에서 삼성전자의 일별 시세 데이터를 크롤링해보다가 아래와 같이 문의드립니다.
 

soup.select("table.type2") 관련 문의

강의 내용대로 따라했는데, len(soup.select("table.type2"))가 1이 아니라 3이 나옵니다.
그리고 soup.select("table.type2 tbody > tbody > tr")을 해보니
iframe의 코드를 읽지 못하고 본문 페이지의 내용만을 읽어온 것 같습니다.
 
res.text를 실행해서 아웃풋을 꼼꼼히 읽어보니 역시 iframe의 자식 구조들은 읽지 못하더라구요.
(아래는 발췌한 내용)
<iframe name=\'day\' src=\'/item/sise_day.naver?code=005930\' width="100%"  height=360 marginheight=0 bottommargin=0 topmargin=0 SCROLLING=no frameborder=0 title="일별 시세"></iframe>
 
강의에서는 오히려 반대로 reqeusts.get()을 사용하면 iframe의 Network Resource 부분을 res로 받아오던데
저는 본문의 html을 받아오는 이유가 있을까요?
 
제가 작성한 코드는 아래와 같습니다.
 
my_headers = { "referer" : "https://finance.naver.com/item/sise_day.naver?code=005930&page=1", "upgrade-insecure-requests" : "1", "user-agent" : "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/97.0.4692.99 Safari/537.36" }
 
res = requests.get(
    url = "https://finance.naver.com/item/sise.naver?code=005930",
    headers = my_headers
)
 
soup = bs4.BeautifulSoup(res.text)
res.text

python 웹-크롤링

답변 1

0

DeepingSauce

안녕하세요!

수업자료의 url과 다른 url을 쓰신듯 합니다.

수업자료의 url은 https://finance.naver.com/item/sise_day.nhn?code=005930&page=3 입니다( sise_day.naver? 가 아닙니다)

 

감사합니다. 

0

gaol.sgkb

질문 안에 답이 있었네요..ㅎㅎ

참조할 URL이 잘못되어있으니 잘못 긁어 올 수 밖에 없었겠군요.

명쾌한 답변 및 좋은 강의 감사합니다.

15.1 네이버 부동산 사이트 개발자도구 실행시 현상 문의

0

863

1

requirments 설치 시 오류

0

84

1

6.1 미국주식 데이터 크롤링이 막혔네요.

0

204

2

태그를 못찾는 오류 질문드립니다.

0

130

2

6.1 미국 주식 데이터 크롤링을 막아둔 거 같아요.

0

261

2

requirements.txt 다운로드가 안끝나요

0

133

2

주신 파일로 다운로드를 하던 중에 끝에 이런 오류가 뜨는데 어떡해야하나요?

0

144

1

혹시 애플 M시리즈 사용하시는 분 중에 오류

0

145

0

전일비 상승,하락때문에 int화를 못하고 있는데

0

120

1

일별 시세 데이터 상승/하락 \t\n해결법

0

152

1

pd.concat(df, ignore_index=True) InvalidIndexError 해결 방법 문의

0

448

2

pip install -r requirements.txt 문제

0

353

3

부동산 KB 시세 크롤링 문의

0

811

1

7.1 주식 일별 시세 데이터(Yahoo finance)

1

372

1

네이버 부동산 매물 크롤링 오류

0

638

1

네이버 부동산 크롤링 문의드립니다.

0

1044

1

버전 관련 질문

0

344

1

5.2강 주식 일별 시세 데이터 관련 질문이 있습니다

0

276

1

7.1 야후 파이낸스 크롤링 request 오류

0

738

1

anaconda

0

355

1

야후파이낸스 크롤링 오류

0

822

1

셀레니움 변경점

2

790

1

request.get() 하면 SSLCertVerificationError 에러가 납니다.

0

511

1

이론 수업 자료 공유 해주실 수 있나요?

0

360

0