蜘蛛总是抓取一个页面次数多次，浪费抓取次数，怎么办？

蜘蛛总是多次抓取一个页面，浪费抓取时间。我该怎么办？蜘蛛总是多次抓取一个页面，浪费抓取时间。我该怎么办？简介:蜘蛛总是多次爬行一个页面，浪费了爬行的次数。我该怎么办？ ltp gt ltstrong gt萧立明说: lt/p gt； ltp gt制作其他页面的内部链接指南