看日志，每天蜘蛛抓取几十次，有13是抓的js、css，是否应该屏蔽

看日志，蜘蛛一天抓取几十次，其中13次是抓取的js和css。我们应该阻止日志吗？蜘蛛一天抓取几十次，其中13次是抓取的js和css？导读:最近一直在观察日志。以昨天为例，如下图所示。通过光年和爱站的日志分析工具，蜘蛛抓取次数为74次。 但是发现图片、js、css占20%左右，因为大部分图片和样式文件都在image里(如下图)。我需要把这个