robots屏蔽目录抓取,这样写是否正确?

橛子2022-11-06  9

机器人阻止目录搜索。这是正确的吗?机器人阻止目录搜索。这是正确的吗?简介:我不希望搜索引擎抓取被收录网站根目录下的english和admin文件夹中的所有页面。robots.txt文件这样写对吗?请指出用户代理:*Disallow: /english。
转载请注明原文地址:https://juke.outofmemory.cn/read/2372816.html

最新回复(0)