텔레그램 sendMessage 시 400에러가 뜹니다.

http://api.telegram.org/bot{bot_token}/sendMessage 이걸 https://api.telegram.org/bot{bot_token}/sendMessage 이렇게 바꿔보세요.(http -> https) 그리고 import telegram를 사용하는건 telegram 라이브러리를 설치하는 방식이고 제 강의는 라이브러리 설치없이 그냥 텔레그램 공식 API만 사용하는 방식입니다.

ftp 로긴 문제입니다. ㅜ

ftp 530 에러는 아이디나 비밀번호가 맞지 않을 경우 발생하는 에러입니다. 아이디와 패스워드가 확실한데 안된다면 호스팅 업체에 문의해보시는 게 좋습니다.

XPATH 네이버에서 카페 찾는 과정 문의입니다.

[3]이게 잘못되었습니다. '카페'를 찾았을 때 맨 처음 나오는 것은 '가입한 카페'입니다. "//*[text()='카페']" 여기에 해당되지 않기 때문에 "//*[text()='카페']"[3] 이 아니라 "//*[text()='카페']"[2] 가 되어야 합니다.

셀레니움 By.XPATH 를 이용한 키워드 입력 작성 질문입니다.

weallnoob님이 좋은 답변을 달아주셨습니다.

파이썬에 키워드를 치는게 아닌...

파이썬 schedule 모듈을 사용하면 간단합니다. 그리고 Amazon EventBridge를 사용하여 정해진 시간 또는 간격으로 AWS Lambda에 올려놓은 크롤링 코드를 실행시켜 텔레그램으로 결과를 전송하는 방법이 업데이트 예정입니다.

쿠팡 이미지 파일 다운받기에서 동일하게 코드 작성 후 요청하였지만 파일 다운로드가 안됩니다.

8-0 쿠팡 크롤링을 위한 기본 설정의 수업 노트를 확인해 주세요. 코드에 추가되어야 하는게 있습니다.

50프로 수강중입니다~

json으로 정보를 받는다면 더 편하게 원하는 정보를 수집할 수 있습니다. 예를 들어서, import json data = '{"name":"kimfl", "age":20}' # 받아온 json result = json.loads(data) # json을 dict로 변환 print(result) print(type(result)) 이렇게 실행하면 {'name': 'kimfl', 'age': 20} json으로 받은 정보를 딕셔너리로 변경한다음 파이썬에서 딕셔너리에 사용하는 문법 그대로 사용하면 됩니다.

제품 링크를 타고 들어가야 원하는 정보가 나오는 사이트

link_list = [] for item in items: 반복문이 시작하기 전에 link_list = [] 이런식으로 빈 리스트를 만들어놓고 반복문안에서 link = item.select_one(".item_inner").attrs['href'] 이 코드 아래에 link_list.append(f"https://kream.co.kr{link}") 이런식으로 코드를 추가해서 link_list에 모든 링크를 담습니다. 그다음 그 리스트를 반복문으로 돌리면 됩니다. for url in link_list: driver.get(url)

lst = lst50 + lst100 이거 대신에

멜론은 1위부터 50위까지가 클래스 lst50, 51위부터 100위까지가 lst100입니다. 위 코드는 if 구간에서 lst를 1위~50위로 지정하고 elif 구간에서 lst를 51위~100위로 교체하게 됩니다. 그러니까 50개만 나오게 되는거죠. lst = lst50 + lst100 이게 중요한 겁니다. 두개를 합치쳐서 100개로 만드는거죠.

증권, 메일 등 서비스 목록을 못가져와요 ㅠㅠ

현재 네이버 메인화면은 뷰티풀수프만으로 크롤링이 불가능합니다. https://youtu.be/go1D0f0lLvw 해당 사항에 대해서는 위 영상을 참고해 주세요. 일단 뷰티풀수프 사용법을 익히면서 강의를 진행하시고 셀레니움까지 배우고 나면 아주 간단하게 네이버 메인화면 크롤링이 가능하실 겁니다.