scrapy를 jupyter 환경에서 할 수 있나요

Question

안녕하세요, 강사님. 좋은강의 감사드립니다.   우선 scrapy를 보면 관련 .py를 editor(sublime?)에서 수정을 하고, terminal에서 scrayp crawl ~~ 등으로 실행을 하는데요,   파이썬코드가 작동되다가, 어떤조건에서 scrapy에게 크롤링을 시킨다거나 등등을 하고자 하는데... 이럴때는 아무래도 jupyter 에서 위 terminal에서 했던 행동들이 가능해야 할 것같은데   scrapy를 jupyter(terminal이 아닌 editor)에서 작동시킬 수 있나요?

funcoding · Answer

scrapy 는 여러 관련된 파일들이 있으니까요. 주피터로는 하기 어려울 것 같습니다. 추가로, 본 질문/답변은 평생 강의이기 때문에, 강의 영상 이해가 안되서, 다음 진도가 나갈 수 없는 경우에 대해, 답변을 드리는 것인데요.  4년간 강의를 진행하면서, 이렇게 많은 문의를 주시는 경우는 없었거든요. 하루에도 4개의 질문에 심지어 일부 질문은 그 질문 안에 또다른 여러개의 질문들이고, 강의를 들으시면서, 생각나는 부분들을 다 질문을 해주시는 것 같아요. 그런데, 아무래도 제가 각자분들을 과외처럼 진행할 수는 없는 부분도 이해는 하실 수 있으실 것 같아요. 사실, 각자 IT 기술이 다 연결되어 있는데, 관련 기술을 사용하실 때마다, 궁금한 부분이 생기면, 다 질문하고, 제가 답변을 반드시 해야하는 것으로 인지가 된다면, 평생 강의라서, 무리가 있으니까요. 이 부분도 좀 이해를 좀 부탁드려도 될까요? 가능한 다 답변을 드리는데, 매번 너무 질문이 많으셔서, 저도 무리가 되네요.   인프런측에서도 이런 부분을 고려해서, 다음과 같이 가볍게 서로 질문/답변을 공유하는 메뉴를 운영하고 있는 것으로 알고 있습니다. 다양하게 생각하시는 질문들은, 가능하다면, 다음 메뉴를 활용해보셔도 좋을 것 같습니다.  https://www.inflearn.com/community/questions   감사합니다.