网站改版，蜘蛛为什么还会抓取一些不存在的目录和链接。

为什么网站改版时蜘蛛会抓取一些不存在的目录和链接？ 为什么网站改版时蜘蛛会抓取一些不存在的目录和链接？ 简介:网站改版一个多月了，换了新的服务器。 最近看网站日志，发现百度蜘蛛也会抓取一些以前的目录和链接。比如之前的目录在新的服务器上已经完全没有条目了，之前的链接基本都提交死链了，甚至机器人也做了一些限制。