蜘蛛总是爬取重复的页面怎么禁止？

蜘蛛总是抓取重复的页面。怎么能禁止呢？蜘蛛总是抓取重复的页面。怎么能禁止呢？简介:网站蜘蛛经常正常抓取，但是每次抓取的页面重复太多。如何禁止蜘蛛引导蜘蛛抓取正确的页面？我要做什么呢？为什么蜘蛛总是抓取重复链接的页面，但是网站上的问题怎么改正？ ltp gt ltstrong gt皮皮说: