网站的接口老是被蜘蛛访问，需不需要写到robots协议里，禁止蜘蛛抓取呢？

香蕉薄饼2022-10-30 14

网站的界面总是被蜘蛛访问。需要写进robots协议里禁止蜘蛛爬行吗？网站的界面总是被蜘蛛访问。需要写进robots协议里禁止蜘蛛爬行吗？简介: ltp gt ltstrong gt你是凡人，你说: ltp gt有些搜索引擎没有规则，爬得到处都是，很麻烦

转载请注明原文地址:https://juke.outofmemory.cn/read/2273227.html

00 生成海报

蜘蛛

抓取

接口

禁止

协议

排名一直没有上首页的关键词，什么原因

上一篇2022-10-30

搜老刘博客只能搜索到首页快照，文章页没有，怎么优化？文章页每篇机会都有这个词“老刘博客”

下一篇2022-10-30

最新回复(0)