네이버카페 크롤링 실습

네이버 카페 robots.txt 로 웹 크롤링을 막고 있는데, 이걸 무시하고 크롤링해도 괜찮을까요?