网站蜘蛛爬取页面重复太高咋办?

蜘蛛抓取的页面重复率太高怎么办？蜘蛛抓取的页面重复率太高怎么办？简介:蜘蛛经常来网站。每次来都是抓取重复的页面，但是每次其他页面都不抓取。这是什么意思？如何引导蜘蛛爬页面？有段时间没查日志了，然后来的时候爬了太多重复的页面。我该怎么办？ ltp gt ltstrong gt∞语音:

欢迎分享，转载请注明来源：聚客百科

原文地址: http://juke.outofmemory.cn/life/2361562.html