网站蜘蛛抓取不精准 每次抓取重复怎么办？

蜘蛛每次反复爬都爬不准怎么办？蜘蛛每次反复爬都爬不准怎么办？简介:网站蜘蛛每天按时来，来的次数正常，就是每次来，抓取的页面都太重复。怎样才能防止蜘蛛过于重复的抓取页面？请大家多多指导。谢谢大家！ ltp gt ltstrong gt阿尔·帕西诺说: