抓取数据在时候遇到非法访问

对数据进行爬网时，会遇到非法访问。对数据进行爬网时，会遇到非法访问。简介:一个爬虫，我挑的，然后我选了webmagic，我从一个网站抓取数据。感觉很好。 但是我换了一个网站，发现这个网站的数据在页面上是没有的，都是通过ajax请求获取的。更悲剧的是，人家还做了拦截器，不能直接模拟浏览。