Python Crawling 으로 웹 데이터 추출 입문부터 실습까지

Python Crawling 으로 웹 데이터 추출 입문부터 실습까지

(4개의 수강평)

18명의 수강생

44,000원

Kyeongrok Kim
평생
초급
수료증
23개 수업, 총 3시간 33분
Wishlist
파이썬 데이터 중급 Section 업데이트 완료!

파이썬 크롤러 만들고 데이터 수집하기

우리는 데이터 사회를 살아가고 있습니다. 많은 분야에서 데이터 기반으로 의사결정을 내리고 있습니다. 그래서 데이터를 수집하고 가공하는 방법을 알아둔다면 앞으로의 업무에 도움이 되시리라 생각합니다. 본 강의는 파이썬 기초 개념부터, 우리에게 가장 익숙한 사이트인 네이버에서 데이터 추출 하는 방법을 배웁니다.

또한, 가장 쉬운 '메뉴 이름 가지고 오기'예제를 통해서 데이터를 추출하는 방법을 배울 수 있습니다. 그리고 데이터가 들어있는 주소(url)을 어떻게 찾아내는지 알아보고 네이버 뉴스에서 실제로 데이터를 수집 해봅니다. 입문 섹션을 통해 기초개념을 다졌다면, 중급 섹션에서 금융주식 데이터를 선택적으로 받아오는 실습을 진행합니다.

학습 목표

    • 파이썬에 대해 배우고 파이썬을 이용해 네이버 뉴스 제목을 자동으로 수집할 수 있습니다.
    • BeautifulSoup의 .find(), .findAll()을 이용해 다양한 경우에 유연하게 데이터를 수집 하는 방법을 배웁니다.

   

 도움이 되는 분들

  • 프로그래밍을 처음 배우는 분
  • 단순 데이터 수집 작업이 많으신 분
  • 많은 데이터를 여전히 엑셀로만 처리하고 계신 분
  • 논문을 써야 하는데 프로그램이 필요한 대학원생
  • 파이썬으로 데이터 수집을 하는데 기본을 배우고 싶으신 분들

참고 사항

  • 사용하는 기술 : python3, pycharm

 지식공유자 소개

김경록
· 코인거래소 백엔드 개발
· 크롤러, api 개발
· back end 개발 및 운영(Spring Boot, Spring Data JPA)
· front end 개발 및 운영(Node, React)
· ‘경록김의 뷰티플 프로그래밍’ 운영(블로그) | http://krksap.tistory.com
· ‘경록김의 뷰티플 프로그래밍 멘토링’ 운영(1:1 프로그래밍 과외)

# 블로그
· ‘경록김의 뷰티플 프로그래밍’ 운영(블로그) | http://krksap.tistory.com
· ‘경록김의 뷰티플 프로그래밍 멘토링’ 운영(1:1 프로그래밍 과외)
# 저서
· 엄마도 따라 할 수 있는 엑셀 VBA | http://krksap.tistory.com/
· 웹 데이터 수집의 기술 | 한빛미디어 (2017. 08)
· Node.js 200제 | 정보문화사 http://www.yes24.com/24/goods/59384816
# 강의
· 직장인을 위한 데이터 수집 자동화(Node.js) - 패스트캠퍼스
· 구글스프레드시트 - 패스트캠퍼스
· 엑셀을 활용한 업무 자동화(VBA) - 패스트캠퍼스

지식공유자 소개

Kyeongrok Kim

교육과정

파이썬 데이터 수집 입문
프로젝트 만들기
03 : 00
hello 출력하기
05 : 00
function 만들기
09 : 00
변수와 상수
09 : 00
파라메터
05 : 00
리턴
12 : 00
반복문 for
11 : 00
2단 출력하기
11 : 00
네이버 받아오기
08 : 00
install bs4
06 : 00
bs4로 파싱하기
14 : 00
naver menu1
13 : 00
naver menu2
09 : 00
naver news
15 : 00
파이썬 데이터 수집 중급
네이버 금융 데이터 수집 - 리팩토링
07 : 00
뷰티풀솝
08 : 00
함수 구조 개선, 리스트
09 : 00
여러가지 정보 뽑아내기
09 : 00
find() findAll() 자세히 배우기
10 : 00
findAll() 사용법 심화
09 : 00
실제 페이지에서 뷰티불솝 이용하기
15 : 00
다양한 경우에 유연하게 데이터 뽑기
10 : 00
여러 페이지의 정보 한 번에 수집하기
06 : 00

수강 후기

3.5
4개의 수강평
전종욱 4달 전
BeautifulSoup 의 사용법을 잘 배웠습니다. 앞 부분에 python 기본 교육 시간이 조금 긴 거 같습니다.
jackjack 6달 전
기초를 배우기에 즣은 강좌 기초 내용을 익히기에 좋은 강의였습니다. 하지만 중급 부분은 입문 부분과 큰 차이가 없어 아쉬웠습니다.
Kyeongrok Kim 9달 전
중급 강의 업데이트 했습니다. 파이썬 데이터 수집 강좌 강사입니다. 1시간 넘는 분량의 9개 중급 강의를 업데이트 하였습니다.
석지훈 10달 전
유료 강의치고는 내용이 빈곤하네요.. 강의 잘 들었습니다. 허나 3만원주고 들을 강의는 아닌것같습니다. 인터넷에 치면 바로바로 나오는 내용들 뿐이었고... 크롤링의 기초중의 기초만 한 느낌이네요.