网站抓取配额是固定的，有必要屏蔽无效的css和js等页面抓取量吗，有好的方法吗

网站抓取配额是固定的。有必要屏蔽css、js等无效页面抓取吗？有什么好办法吗？有必要屏蔽css、js等无效页面抓取吗？有什么好办法吗？简介:网站抓取配额是固定的，但是总有百度抓取一些js和css的时候，会浪费很多配额，有时候甚至会占很大比例。为了保证有效的页面抓取，有什么好的方法可以避免百度的无效抓取？ ltp gt ltstrong gt啦啦说: