-
카테고리
-
세부 분야
데이터 엔지니어링
-
해결 여부
미해결
ROBOTSTXT_OBEY 와 DUPEFILTER_CLASS
19.08.28 07:59 작성 조회수 145
0
settings.py의 ROBOTSTXT_OBEY 와 DUPEFILTER_CLASS의 역할에 대해 한번만 더 설명해주시면 감사드리겠습니다.
'실전 크롤링: gmarket 크롤링하며, scrapy 실전 활용법 익히기5' 편의 09:19 쯤에 미리 작성하셨다고(?) 언급하신 것 같은데 하다보니 궁금해졌습니다.
감사합니다!
답변을 작성해보세요.
0
답변 1