百度不收录最近文章，蜘蛛全抓取错误目录

百度不收录最新文章，蜘蛛爬错目录。百度不收录最新文章，蜘蛛爬错目录。导读:最近一周，百度突然不收录我网站的最新文章了。我开始是因为收录有延迟，但是今天我查了日志，发现蜘蛛90%的精力都在爬错误的目录和不存在的目录。我一个多月前遇到的这些现象已经在robots.txt中被禁止了