想用robots.txt来禁止蜘蛛抓取一些无用的东西，怎么写？

我想用robots.txt禁止蜘蛛抓取一些没用的东西。怎么写？我想用robots.txt禁止蜘蛛抓取一些没用的东西。怎么写？简介:我想用robots.txt禁止蜘蛛抓取一些没用的东西！为搜索引擎提供简洁明了的索引环境，增加其权重，但我的网站robots.txt并没有禁止！我应该在我的网站上禁止什么？大神对你的建议很慷慨。 [标签:标签1