안녕하세요.
잔재미코딩 Dave Lee 입니다.
'지마켓 크롤링하며, scrapy 실전 활용법 익히기5' 영상에, 추가 설명을 붙여서, 업데이트하였습니다.
해당 영상에서 parse_subcategory 를 호출하는 부분에 대한 코드 설명이 있는데요.
이 부분이 제가 드린 코드 외에, 직접 코드로 작성하신다면, settings 에 추가적으로 다음 설정을 해줘야 하는 것인데요.
DUPEFILTER_CLASS = 'scrapy.dupefilters.BaseDupeFilter'
다른 영상 어디선가 이 부분에 대해 제가 설명을 한 것으로 생각은 하고 있는데,
제가 놓친 것이 아닌가 해서, 다시 한번 많은 시간을 들여서, 녹화와 편집을 다시 하였습니다.
좀더 이해에 도움이 되실 것 같아서, 공유드립니다.
감사합니다.
