蜘蛛爬取死链接太多怎么处理好？

蜘蛛爬的链接太多怎么处理？蜘蛛爬的链接太多怎么处理？简介:网站上的死链接太多了。蜘蛛会抓取页面上的一些死链接，反复抓取网站的页面也无法乱码。我现在不知道该怎么处理他们。蜘蛛爬得有点乱。他们怎样才能有规律地起床？请给我一些建议。谢谢大家！ ltp gt ltstrong gt目录上写着: