-
질문 & 답변
카테고리
-
세부 분야
데이터 분석
-
해결 여부
해결됨
웹 크롤링
20.11.18 23:45 작성 조회수 145
0
여기까지 매우 재밌게 보았습니다.
실습중에 궁금한건, bs4로는 '더보기'가 있는 웹페이지는 크롤링이 불가능한지요?
구글링해보니 selenium 이라는 라이브러리가 있던데,
이 다음단계 강의에서 이 부분도 추가로 다루는지 궁금합니다
답변을 작성해보세요.
1
잔재미코딩 DaveLee
지식공유자2020.11.19
안녕하세요. 재미있게 보셨다니 정말 다행이고, 기쁩니다.
관련 내용은 '현존 최강 크롤링 기술: Scrapy와 Selenium 정복' 강의에서 설명드리고 있습니다. 더보기 라는 버튼이 어떤식으로 구성되어 있는지는 웹페이지마다 다르긴 할텐데요. 일단 동적 웹페이지와 관련된 부분은 크롤링 중급에 해당하는 내용이고 이 부분은 selenium 으로 가져와야 합니다. 이 부분은 지금까지 익힌 부분과는 살짝 더 나아가서, 각 웹페이지에 맞게 코드를 작성해야해서, 일정부분 파이썬이 숙련이 되어있어야 되기도 하고 내용이 이외에 많고, scrapy 라는 성능 좋은 크롤링 기법도 있어서, 이 부분과 함께 설명드리고 있습니다. 감사합니다.
데이터 분석/과학 코스: 원하는 데이터를 가져와서 분석하고, 예측까지 할 수 있는 최신 테크트리
1. 파이썬 입문과 크롤링 기초 부트캠프 (파이썬과 데이터 수집 기본)
2. Scrapy와 Selenium 정복 (현존 최강 크롤링 중급 기술 및 관련 IT 지식)
3. SQL과 데이터 저장/분석 기본 (데이터 저장/분석)
4. NoSQL(mongodb) 빅데이터 기본 (빅데이터 저장/분석)
5. 파이썬 데이터 분석 기본 (데이터 분석)
6. 머신러닝/인공지능 기본 (데이터 예측, 열심히 준비하고 있습니다)
* 현재까지의 데이터 과학 강의 패키지를 할인된 가격으로도 제공합니다. (할인율은 곧 축소 예정입니다.)
[입문~초급] 취업을 위한 데이터 분석 기본 기술 쉽게! 꼼꼼하게 익히기
0
답변 2