강사님! 스크래피로 접속시 웹방화벽에서 Deny 메세지를 뿌리는데요....

이럴 경우 스크랩핑 할 방법이 궁금합니다. ^^

크롤링 하려면 어떻게 하면 좋을까요? 

kwansoonpark  ~/security_post

 scrapy shell 'https://edu.tta.or.kr/cop/bbs/selectBoardList.do\?bbsId\=BBSMSTR_000000000001'

[s] Available Scrapy objects:

[s]   scrapy     scrapy module (contains scrapy.Request, scrapy.Selector, etc)

[s]   crawler    <scrapy.crawler.Crawler object at 0x10f623590>

[s]   item       {}

[s]   request    <GET https://edu.tta.or.kr/cop/bbs/selectBoardList.do%5C?bbsId%5C=BBSMSTR_000000000001>

[s]   response   <200 http://www.tta.or.kr/deny_notice.jsp>

[s]   settings   <scrapy.settings.Settings object at 0x10f623090>

[s]   spider     <DefaultSpider 'default' at 0x110c13e90>

[s] Useful shortcuts:

[s]   fetch(url[, redirect=True]) Fetch URL and update local objects (by default, redirects are followed)

[s]   fetch(req)                  Fetch a scrapy.Request and update local objects

[s]   shelp()           Shell help (print this help)

[s]   view(response)    View response in a browser

In [1]: