inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

파이썬 증권 데이터 수집과 분석으로 신호와 소음 찾기

다른 사이트를 크롤링해보려는데 인코딩쪽에 문제가 있는 것 같습니다.

411

왕이될상인가

작성한 질문수 5

0

안녕하세요 선생님. 선생님 강의를 듣고 제가 원하는 사이트를 크롤링 해보려는데 인코딩문제가 생기는 것 같습니다. 사이트 주소는 이렇습니다. http://veganfesta.kr/modules/company/company_list.html?mc_code=1013

import requests
url = "http://veganfesta.kr/modules/company/company_view.html?seq=241&mc_code=1013"
headers = { 'user-agent' : 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/109.0.0.0 Safari/537.36'}
response = requests.get(url,headers=headers)
response.encoding='utf-8'
print(response.text)

이렇게 코드를 짜봤는데요 결과는스크린샷 2023-03-19 오후 9.05.39.png

이런식으로 나옵니다. 인코딩 문제인가 하였는데

response.encoding을 통해 uff-8인것을 확인했습니다.

response.status는 200으로 정상이구요 ㅜ

뭐가 잘못된 걸까요? 2시간가량 전전긍긍해보았지만 답을 찾지못해 선생님께 질문드립니다..

제가 url을 구글이나 네이버로 바꿔 시도를 해보았을때는 잘되었는데 저 사이트로 url을 설정했을때 이렇게 나오네요.. 읽어주셔서 감사하며 답변 부탁드리겠습니다.

python pandas numpy 웹-크롤링 seaborn plotly matplotlib 웹-스크래핑

답변 1

1

박조은

안녕하세요. HTML 페이지 인코딩과 데이터 인코딩이 다른 경우도 있습니다. utf-8 이 아닌 cp949 등의 다른 인코딩으로 시도해 보세요!

cufflinks 버전문제로 iplot() 미실행

0

42

2

[수정요청]직접 수집한 주가 데이터로 시각화해보기

0

52

2

pd.read_html(url, encoding='cp949') 에러

0

75

2

fdr.StockListing('KRX') 문제 발생

0

137

2

주식 자동매매 프로그램 제작 관련 조언 부탁드립니다

0

431

1

concat 을 통한 데이터 프레임 합치기 에러 문의

0

105

2

한글폰트 관련해서 문의드립니다.

0

230

2

데이터프레임 칼럼명 문의 드립니다.

0

239

3

금융데이터 수집의 모든것

0

145

2

녹화시점과 현재시점 컬럼명이 변경이 많이 되었을까요?

0

192

2

파이썬 증권 데이터 수집과 분석으로 신호와 소음 찾기 - 섹션1 [2/2]

0

174

1

Mac 환경에서 nbextensions 활성화 하는 방법

0

594

2

pd.concat(result.tolist()) 오류 문의

0

244

1

5.1 제약 데이터 수집 오류 해결

0

231

1

Table of contents 문의드립니다

0

209

2

concat을 통한 데이터프레임 합치기

0

548

2

Reindexing only valid with uniquely valued Index objects 오류 질문입니다.

0

491

1

데이터 비교시 데이터 불일치

0

410

1

dtype={"itemcode": np.object}) 을 dtype={"itemcode": object}) 으로 변경해야 하나요?

0

593

1

질문 : for문 풀어쓰기

0

488

1

파이참에서 Plotly 그래프 실행방법

0

1308

1

5.1 데이터프레임 병합(merge)

0

741

2

쥬피터노트북에서 실행파일 만들기

0

1449

1

주피터노트북 확장팩 설치가 안됩니다.

0

562

2