inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

파이썬 보안 자동화 업무 개발과 OpenAI API 업무 적용

크롤링으로 악성코드 정보 텍스트 추출

BeautifulSoup(html, "html5lib") 오류발생

234

godsibless

작성한 질문수 1

0

2024년 10월 현재 제 pc에 설치된 버전은 requests 2.32.3, beautifulsoup 4.12.3, bs4 0.0.2 , python 3.1.3 인데,

soup = BeautifulSoup(html, "html5lib") 코드는 오류발생 합니다.

"html5lib"대신 "html.parser" 사용하면 정상 작동합니다.

soup = BeautifulSoup(html, "html.parser")

python 웹-크롤링 slack flask

답변 1

0

인프런 AI 인턴

안녕하세요, 인프런 AI 인턴입니다. godsibless님.

BeautifulSoup 모듈을 사용할 때 발생하는 오류에 대한 문제로 보입니다. 사용하신 html5lib 파서는 HTML 및 XML 을 파싱할 때 표준 HTML5 파싱 규칙을 따르지만, 시스템에 “html5lib” 라이브러리가 설치되어 있지 않거나 다른 호환성 문제가 있을 때 오류가 발생할 수 있습니다. 이 경우 html.parser 파서를 사용하면 기본 HTML 파서로써 작동하게 되어 정상 작동하는 것이 보편적입니다.

“html5lib” 대신 “html.parser”로 정상 작동하는 이유 요약:

  1. html.parser 기본 포함: Python의 기본 라이브러리인 “html.parser”는 추가 설치가 필요 없으며 범용적인 파서입니다.

  2. html5lib 설치 필요: “html5lib”를 사용하려면 해당 모듈을 별도로 설치해야 하며, 설치되지 않은 경우 오류가 발생할 수 있습니다.

  3. 라이브러리 호환성: 설치된 Python 버전과 완벽하게 호환되지 않을 경우 특정 파서에서 오류가 발생할 수 있습니다.

이러한 경우에는 html.parser를 사용하는 것이 일반적으로 문제를 해결하는 방법입니다. 다만, html5lib를 사용하고 싶다면, ‘html5lib’ 라이브러리가 올바르게 설치되어 있는지 확인해 보시기 바랍니다. 설치는 아래의 명령어를 통해 수행할 수 있습니다:

pip install html5lib

관련하여 동일한 문제를 겪고 계신 다른 학습자의 질문과 토론을 통해 추가적인 정보를 얻을 수 있습니다. 유사한 문제의 다른 사례들을 참고하시기 바랍니다:

저는 질문자님의 이해를 돕고자 지식공유자님의 기존 답변을 참고하여 유사한 답변 링크를 추천해드리고 있습니다. 현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏 추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.

8분54초 테이블 내용 문의

0

2

0

코딩팡 장업형2 베이스 라인 인코딩 종류 질문

0

10

2

multi_tool_agent.py 에서 arxiv tool 에러

0

12

1

로지스틱회귀, 회귀

0

35

2

가상 환경과 차이 도커 질문

0

18

1

자료 다운로드 위치 확인 부탁드립니다.

0

9

1

회귀 문제를 풀때 질문입니다.

0

34

1

불균형 처리 후 성능이 더 낮아졌다면,

0

48

2

실기 체험 제2유형 에러 문의

0

40

1

LIGHTGBM 으로 하면 pred값이 소수점 6자리까지 나오는게 맞나요

0

36

2

안녕하세요

0

16

2

3번문제 등분산 가정

0

36

2

작업형3 target 형 변환 질문

0

30

2

[작업형1] 연습문제 섹션1 ~ 10 의 section4

0

24

3

원핫인코딩과 레이블 인코딩에서 concat

0

47

2

agent 평가 관련 문의 드립니다.

0

16

1

제2유형 질문입니다.

0

39

2

WSL에서 Airflow 실행 시 로컬 venv 라이브러리 사용 여부 및 관리 방법

0

16

2

C()

0

36

2

작업형 2에서 strafity 적용 유무

0

45

2

수강 기간 연장 가능 여부 문의드립니다.

0

48

1

ols

0

38

2

ModuleNotFoundError: No module named 'googletrans'

0

80

1

파일이 이진이거나 지원되지 않는 텍스트 인코딩을 사용하므로 표시되지 않음

0

739

3