[导读]:今天 查看网站日志 发现收录 了好多的JS文件和CSS文件,这样是好还是坏呀,需不需要进行屏蔽 应该说是被蜘蛛抓取了而不是被收录,抓取不等于收录。 如果蜘蛛对JS和css爬取的...
今天 查看网站日志 发现收录 了好多的JS文件和CSS文件,这样是好还是坏呀,需不需要进行屏蔽
应该说是被蜘蛛抓取了而不是被收录,抓取不等于收录。
如果蜘蛛对JS和css爬取的比较多比较频繁的话,建议屏蔽下。
让蜘蛛更多的去抓取其他的内容,毕竟蜘蛛是不识别js和css的抓取太多就浪费了。
本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/36475.html
