강선종

본 수업에서는 파이썬(Python)을 활용하여, 다양하게 동작하는 사이트로부터 데이터를 가져오고(크롤링) 처리하는 테크닉에 대해서 배우고, 이를 응용하여 실전에서 마주할 수 있는 다양한 예제들에 직접 적용해봅니다. 이를 통해 주어진 코드를 복사해서 붙여넣는 방식의 일차원적인 업무 자동화가 아닌, 웹이 작동하는 기본 원리에 대한 이해를 바탕으로 한 실전 문제 해결 위주의 기술들에 대해서 익히고, 이에 따라 여러분들은 앞으로 어떤 사이트에서도 데이터를 수집하고 처리할 수 있는 역량을 가질 수 있습니다. 또한 이 과정에서 발생하는 다양한 예외상황들을 어떻게 코드로써 해결하는지에 대한 내용을 배우며 최종적으로는 일상에서 발생하는 다양한 문제들을 프로그래밍적 사고로 해결하고 자동화 할 수 있게 됩니다.

DeepingSauce

지식공유자의 깜짝할인

내 업무를 대신 할 파이썬(Python) 웹크롤링 & 자동화 (feat. 주식, 부동산 데이터 / 인스타그램)

입문

초급

중급이상

파이썬

Python

Web Crawling

웹 크롤링

오리엔테이션

코드보다 중요한 원리, 웹과 인터넷, 그리고 HTTP

웹사이트를 구성하는 3가지 요소, HTML/CSS/JAVASCRIPT

파이썬(Python) 크롤링 관련 라이브러리의 원리 및 주의사항

파이썬 웹 크롤링 방법1. requests 라이브러리

requests 실전예제1 - 국내 주식 데이터(네이버 금융)

requests 실전예제2-1 - 미국 주식 데이터 (Marketwatch)

requests 실전예제2-2 - 미국 주식 데이터 (yahoo finance, 3rd party lib 등)

requests 실전예제3 - POST request

requests wrap-up

(RESTful) API

파이썬 웹 크롤링 방법2. selenium 라이브러리

selenium 실전예제1 - 네이버 블로그 목록

selenium 실전예제2 - 네이버 금융 시세 데이터

selenium 실전예제3 - 인스타그램(instagram) 팔로우 & 좋아요

selenium 실전예제4 - 네이버 부동산(Advanced)

selenium wrap-up

강의 wrap-up