蜘蛛来网站后为什么只抓取首页和css js这些，内页它不香吗，为啥不抓取？

为什么蜘蛛来网站后只抓取首页和css js？内页不香吗？你为什么不抓住它？为什么蜘蛛来网站后只抓取首页和css js？内页不香吗？你为什么不抓住它？简介:看网站日志都是这样的:首页css js然后走一段再来→首页css js然后走一段再来→首页css js然后走一段再来→首页CSS js然后走一段再来...各种投稿，内链结构精细。