내 업무를 대신 할 파이썬(Python) 웹크롤링 & 자동화 (feat. 주식, 부동산 데이터 / 인스타그램)
본 수업에서는 파이썬(Python)을 활용하여, 다양하게 동작하는 사이트로부터 데이터를 가져오고(크롤링) 처리하는 테크닉에 대해서 배우고, 이를 응용하여 실전에서 마주할 수 있는 다양한 예제들에 직접 적용해봅니다. 이를 통해 주어진 코드를 복사해서 붙여넣는 방식의 일차원적인 업무 자동화가 아닌, 웹이 작동하는 기본 원리에 대한 이해를 바탕으로 한 실전 문제 해결 위주의 기술들에 대해서 익히고, 이에 따라 여러분들은 앞으로 어떤 사이트에서도 데이터를 수집하고 처리할 수 있는 역량을 가질 수 있습니다. 또한 이 과정에서 발생하는 다양한 예외상황들을 어떻게 코드로써 해결하는지에 대한 내용을 배우며 최종적으로는 일상에서 발생하는 다양한 문제들을 프로그래밍적 사고로 해결하고 자동화 할 수 있게 됩니다.
- 미해결
15.1 네이버 부동산 사이트 개발자도구 실행시 현상 문의
<img src="https://cdn.inflearn.com/public/files/posts/3dc76193-b43d-4b6d-ab96-0bb1e11e3a78/0a1b21f6-e788-41aa-b8a7-7832d8129e13.webp" media-type="img"
python웹-크롤링moonchoh
・
9달 전
0
862
1
- 미해결
requirments 설치 시 오류
<img src="https://cdn.inflearn.com/public/files/posts/4722b4b9-62c4-45a8-93e9-f888f904ea25/884b906a-e56f-4174-8660-22e0fa0c4e6b.webp" media-type="img"
python웹-크롤링eunjung.kim
・
9달 전
0
84
1
- 미해결
6.1 미국주식 데이터 크롤링이 막혔네요.
수업 잘들으면서 6.1 까지 왔는데 marketwatch에서 막혔네요. 제가한 방법은 :"
python웹-크롤링홍정진
・
10달 전
0
202
2
- 미해결
태그를 못찾는 오류 질문드립니다.
subject_element[9].find_element(By.CSS_SELECTOR,"a.link_service >
python웹-크롤링권태혁
・
0
129
2
- 미해결
6.1 미국 주식 데이터 크롤링을 막아둔 거 같아요.
import requestsres = requests.get("<a target="_blank" rel="noopener noreferrer nofollow" href="https://www.marketwatch.com/investing/stock/aapl
python웹-크롤링권태혁
・
0
261
2
- 미해결
requirements.txt 다운로드가 안끝나요
<img src="https://cdn.inflearn.com/public/files/posts/a408d154-3387-4e13-aa56-63bcf045e85d/ae019e84-bacb-48eb-b066-15ae580db609.png" media-type="img"
python웹-크롤링권태혁
・
0
132
2
- 미해결
주신 파일로 다운로드를 하던 중에 끝에 이런 오류가 뜨는데 어떡해야하나요?
<img src="https://cdn.inflearn.com/public/files/posts/b4bf1aeb-f61e-4d33-bdfc-6db15a98fbe4/7a8d6c97-0af6-451a-9eb6-abc9c8d9ce4a.webp" media-type="img"
python웹-크롤링장세미
・
0
144
1
- 미해결
혹시 애플 M시리즈 사용하시는 분 중에 오류
PackagesNotFoundError: The following packages are not available from current channels: - python=3.8.5*이런거 나오면서 가상환경 설치가 안되면, <
python웹-크롤링hoonnews
・
0
145
0
- 미해결
전일비 상승,하락때문에 int화를 못하고 있는데
5.4 영상보면 전일비는 숫자로만되어있네요영상보면 전일비는 숫자로만되어있네요<img src="https://cdn.inflearn.com/public/files/posts/8980851a-438d-4634-8613-b42209117587/962
python웹-크롤링김은준
・
0
119
1
- 미해결
일별 시세 데이터 상승/하락 \t\n해결법
<img src="https://cdn.inflearn.com/public/files/posts/2e5619e3-7010-4dcb-9135-5a9bbd8bf2b6/e8056d10-165c-4c0e-a1f4-46f0de41b6ee.png" media-type="img"
python웹-크롤링김은준
・
0
152
1
- 미해결
pd.concat(df, ignore_index=True) InvalidIndexError 해결 방법 문의
안녕하세요.아래 코드에서 마지막 부분에서 에러가 발생하는데 찾아봐도 해결을 못하겠습니다. # 최종 데이터 합치기
python웹-크롤링pandasconcat초칼라
・
0
446
2
- 미해결
pip install -r requirements.txt 문제
pip install -r requirements.txt 를 치면 아래처럼 설ㄹ치가 되는것 같더니 설치가 끝나질 않고 계속 한줄씩 떠요... 사진처럼 계속 뜨는 와중에 캡쳐해온거에요ㅠ뭐가 문제일까요..?<img src="https://cdn.infl
python웹-크롤링영우
・
0
353
3
- 미해결
부동산 KB 시세 크롤링 문의
kb시세를 크롤링하는 부분에서 같은평형대가 존재하면 마지막에 있는 평형대의 시세를 가져오는것 같습니다.예를들어 해당단지에 117A 타입과 117B타입이 있습니다.아파트의경우 A타입의 거래는 많지만 B타입
python웹-크롤링김수인
・
0
811
1
- 해결
7.1 주식 일별 시세 데이터(Yahoo finance)
7.1 주식 일별 시세 데이터(Yahoo finance) yahoo finance에서 aapl로 검색하고, historical data를 클릭하고 기간을 5년으로 설정하고 Apply 버튼을 클릭하고,
python웹-크롤링s1982cpa
・
1
372
1
- 미해결
네이버 부동산 매물 크롤링 오류
해당 커리큘럼 수행 중 질문드립니다.개포동의 모든 아파트 단지 매물을 크롤링하고싶은데,강사님꼐서 하신방법을 해보니 화면에 떠있는 마커들의 단지들만 크롤링해오는것 같습니다. 지도를 줌아웃 상태에서 compl
python웹-크롤링김수인
・
0
636
1
- 미해결
네이버 부동산 크롤링 문의드립니다.
안녕하세요 좋은 강의 잘 듣고 있습니다.네이버 부동산 크롤링 관련하여 문의드리려고 하는데요,특정 url에 대해 get을 통해 데이터를 받아올 때 특정 횟수 이상 요청을 반복하면 네이버에서 거절을 하는 것 같습니다.(특정 횟수
python웹-크롤링gaol.sgkb
・
0
1,044
1
- 미해결
버전 관련 질문
안녕하세요. 파이썬 및 판다스의 강의 촬영 날짜 기준 버전과 현재 버전이 다른데 문제 없이 강의를 따라갈 수 있을까요??
python웹-크롤링윤서준
・
0
344
1
- 미해결
5.2강 주식 일별 시세 데이터 관련 질문이 있습니다
안녕하세요 5.2강 주식 일별 시세 데이터 part2 강의 중 select문을 find를 활용해서 바꾸는 걸 강의에서 다루시는데 이 부분에 대해서 궁금증이 있어서 질문합니다. <img src="https://cdn.inflear
python웹-크롤링만족한 부엉이
・
0
276
1
- 해결
7.1 야후 파이낸스 크롤링 request 오류
혹시 못보셨나 해서 다시 올립니다.7.1 진행중에 request 오류가 나서기존 질문 답변보고 강의노트에 있는 헤더 넣어서 request.get 했는데도response 404가 나옵니다. </
python웹-크롤링wk
・
0
738
1
- 미해결
anaconda
안녕하세요anaconda 가상환경에 형태소 분석기,konlpy 설치 방법을알려주세요. 여러가지 방법으로 설치를 해도 오류가 나서문의 드립니다. 감사합니다. <
python웹-크롤링hheo97
・
0
355
1