为什么我robots屏蔽了链接，百度还会爬？

为什么我机器人屏蔽了链接，百度还会抓取？为什么我机器人屏蔽了链接，百度还会抓取？简介:我把它设置在机器人上 用户代理:* 不允许:/sell/warehouse/？*但从统计数据来看，你还是可以看到蜘蛛在爬行。网站/卖家/仓库/？precat = 11 ampazs=