묻고 답해요
169만명의 커뮤니티!! 함께 토론해봐요.
인프런 TOP Writers
-
미해결내 업무를 대신 할 파이썬(Python) 웹크롤링 & 자동화 (feat. 주식, 부동산 데이터 / 인스타그램)
개발도구 페이지 network preview 나 network response Json 가져오는법
안녕하세요 유용한 강의 감사드립니다. 강의내용과는 무관합니다만.. 크롤링관련 막히는 부분이있어 조언을 얻고자 문의드립니다. 강의를 전부 듣고 업무에 활용하고자 회사 클라우드 서버의 erp 데이터를 가져오려고 합니다만. souce code 상에는 "You need a browser which full supports HTML5 Canvas to run SpreadJS" 라는 문구와 함께 데이터가 표기가 안되어.. 확인해본결과. 아래와 같이 Network 탭의 Response 나 Preview 탭에 원하는 데이터가 있는 것을 발견하였습니다. 아래 데이터를 받아노는 방법이있나요??. 보안문제로 selenium을 통해서 페이지에 접근을 해야하며.. selenium-wire를 통해 현재 페이지의 payload 까지 가져오는데는 성공하였습니다.
-
해결됨파이썬 무료 강의 (활용편3) - 웹 스크래핑 (5시간)
res = requests.get(url)에서 오류가 나요
이렇게 뜨는데 어떡해야 하나요? import 문제인거 같은데
-
미해결파이썬 무료 강의 (활용편3) - 웹 스크래핑 (5시간)
제발 도와주세요......
저는 네이버 부동산을 스크롤하려고 하고있습니다 하지만 스크롤 대상이 body가 아닌 이 그림에 왼쪽아래 부분에 또다른 작은 부분의 스크롤을 내리려고 하는데 도저히 되질 않습니다 ㅠㅜㅠ 어떻게 해야하는지 답변좀 부탁드리겠습니다.... ㅠㅠㅠㅠ
-
미해결현존 최강 크롤링 기술: Scrapy와 Selenium 정복
scrapy shell에서 실행이 너무 복잡하게 보입니다
scrapy shell로 css 값을 확인할려고 하면 이렇게 다 붙어져서 나옵니다.(오류는 없습니다) 동영상에 나오듯 하나씩 띄어쓰게 나오게 하는 방법은 없나요?? 확인할려고 하면 너무 꼬여서 가독성이 떨어집니다ㅠㅠ 터미널은 iterm2를 사용하고 있습니다
-
미해결현존 최강 크롤링 기술: Scrapy와 Selenium 정복
iterm2를 사용하면서 터미널에서 오류가 발생합니다...
안녕하세요! 크롤링 강의를 듣고 더 배우고 싶어서 스크래피를 듣고 있는 학생입니다. 저는 맥을 사용하고 있기 때문에 영상에서 iterm2를 보고 따라하면서 사용을 하는데 자꾸 zsh: command not found: scrapy 라는 문구가 나옵니다. 이 오류때문에 계속 나아가질 못해서 해결방법이 궁금합니다ㅜㅜ 만약 iterm2 자체 문제이면 기본적으로 설치되어있는 터미널이나, 아나콘다 터미널을 계속 사용해야 하는지 궁금합니다!
-
미해결현존 최강 크롤링 기술: Scrapy와 Selenium 정복
오른쪽 마우스버튼이 안먹히는 사이트들은 크롤링이 불가능할까요?
안녕하세요~ 저는 인터넷 등기소를 크롤링하고 싶은 사람입니다. 이 사이트의 최대의 문제점은 오른쪽 마우스 클릭이 안되서 사이트의 태그 확인이 불가능하다는 점 입니다. 이러한 사이트들은 빠른 포기가 답일까요?