재귀적 크롤링을 위한 링크 가져오기 8:20

안녕하세요. 답변 도우미입니다.

한번 확인해본 다음 작성한 이유는 백 라인 가까이 되는 코드를 한번에 작성하면, 수강하시는 분들께서 따라오시기 어려워서요. 작게 쪼개서, 단계별로 확인해드리면서, 전체 코드를 단계별로 작성해드려서, 따라오시기 쉽게 하기 위함입니다.

다음으로 어떤 태그와 클래스를 가져올지 판단하는 기준은 웹사이트와 크롤링하려는 데이터에 따라 다릅니다. 또 개인별로도 다를 수 있습니다. 다만, 저희같은 경우는 저희가 원하는 데이터만을 선택할 수 있되, 가능한 간단한 태그/클래스 형태를 선호합니다. 복잡한 단계별로 쭉 이어진 태그는 내부 검색시에도 성능을 저하시킬 수 있기 때문입니다.

감사합니다.