주기적으로 크롤링 자동 실행

Question

안녕하세요. 강의 잘 듣고 있습니다. 수강도중 질문이 있어서 올립니다. 타 웹사이트에서 리뷰들을 가져와서 제 디비에 리뷰를 관리한다고 하면, 주기적으로 새로운 댓글들을 업로드할 필요가 있는데 이경우 어떻게 처리를 해야하나요.

찾아보면 java 'Quartz' 는 나오는데 노드를 사용하면서 좋은 라이브러리를 못 찾겠습니다. 혹시 추천하시는 라이브러리 있으신가요?

Answer

크롤러를 만들거나 cheerio정도로 긁어서 가져오시고 주기적으로 하는 것은 리눅스의 crontab 이용하셔서 하시면 됩니다. 라이브러리는 잘 모르겠습니다. 저는 직접 제작해서요