[导读]：通过日志分析，蜘蛛非常喜欢抓取CSS、JS文件，有没有必要禁止抓取他们呢？ 百度抓取JS和css文件是为了更好的，更直观去了解你的网站架构和布局，所以不建议禁止抓取。 百度...
通过日志分析，蜘蛛非常喜欢抓取CSS、JS文件，有没有必要禁止抓取他们呢？
百度抓取JS和css文件是为了更好的，更直观去了解你的网站架构和布局，所以不建议禁止抓取。
百度既然去抓，就有抓的道理。
这个一般没什么必要禁止抓取，如果是频繁抓取，那可以屏蔽。
###有必要禁止，而且是必须禁止
本文来自投稿，不代表微盟圈立场，如若转载，请注明出处：https://www.vm7.com/a/ask/34098.html
