蜘蛛爬取很混乱，请教悬赏3元已结束

蜘蛛爬行非常混乱。求赏。3元已结束蜘蛛爬行。求赏。3元已结束。简介:网站是一个手机站。网站m.yinghuiyun.com用光年日志分析软件分析了一下，发现搜索引擎都是爬出来的JS代码，而且不是一个独立文件里的JS代码，所以我不好在ROBOTS文件里封禁。 问题1:为什么？