网站蜘蛛总是爬取重复的内容什么情况？

网站总是抓取重复的内容。什么情况？网站总是抓取重复的内容。什么情况？导读:最近网站蜘蛛每次都来网站爬，就是爬的都是重复的内容？重复内容被蜘蛛反复抓取过，所以收录量不高。对此我该怎么办？有什么办法可以让蜘蛛不爬行太多重复？ ltp gt ltstrong gt九问九答说: