这种情况下,robots该怎么写?

这种情况下,robots该怎么写?,第1张

这种情况下,机器人应该怎么写?这种情况下,机器人应该怎么写?简介:情况: 网站A和网站B指向同一个项目,同一个IP,共享同一个robots.txt问题: 如何编写robots.txt来屏蔽B网站所有页面的抓取,而A网站不屏蔽任何URL? ltp gt ltstrong gt张玉干说:

欢迎分享,转载请注明来源:聚客百科

原文地址: http://juke.outofmemory.cn/life/2052652.html

()
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2022-10-14
下一篇 2022-10-14

发表评论

登录后才能评论

评论列表(0条)

保存