webmagic 抓取数据在时候遇到非法访问

Magic抓取数据时，会遇到非法访问。Magic抓取数据时，会遇到非法访问。简介:最近开始尝试做爬虫，挑了一下，然后选择了webmagic，也是从一个网站抓取数据。感觉很好。 但是换网站的时候发现这个网站的数据在页面上是没有的，都是通过ajax请求获取的。更悲剧的是，人家还做了拦截器。不要！