robots对蜘蛛究竟有没作用，为什么起不到效果？

机器人对蜘蛛没有影响，为什么没有？机器人对蜘蛛没有影响，为什么没有？简介:做网站SEO有一段时间了，之前不知道怎么写robots.txt。后来听了老师的讲座，重写了网站robots.txt，增加了Disallow: /category.php？ 你可以在网站日志里读到。