日志分析的时候发现蜘蛛在抓取竞价计划页面，这是怎么回事，占比还比较大

在日志分析过程中，发现蜘蛛在爬投标计划页面。发生了什么事?日志分析时，发现蜘蛛在爬竞价方案页面。发生了什么事?比例还是比较大的。简介:我们的页面到达正常吗？前面没有了，后面用来标注竞价和普通接入的区别。 对日志的分析发现，几乎有一半的蜘蛛抓取了这个页面。 而且在百度的统计中，特别是北京的访客访问页面，如何解决被怀疑是蜘蛛的问题。