搜狗蜘蛛只抓网站首页和robots文件，不抓取其他任何内页，这是为什么？

搜狗蜘蛛只抓取网站首页和robots文件，不抓取其他任何内部页面。为什么？搜狗蜘蛛只抓取网站首页和robots文件，不抓取其他任何内部页面。为什么？简介:其他搜索引擎正常抓取(百度，谷歌，360等。)，robots文件都检查过了，meta标准都检查过了，没有nofollow，内容和结构问题都排除了，各位大神指点迷津… ltp gt ltstrong gt攻击:

欢迎分享，转载请注明来源：聚客百科

原文地址: http://juke.outofmemory.cn/life/2024120.html