首页 > 问答 > 蜘蛛每天都抓取js和css文件,需不需要用robots协议屏蔽?

蜘蛛每天都抓取js和css文件,需不需要用robots协议屏蔽?

[导读]:查看网站日志发现蜘蛛每天都抓取js和css文件,需不需要使用robots屏蔽掉啊? 你的JS和css会被搜索引擎所收录吗?建议你好好学习一下Robots的详细说明...

查看网站日志发现蜘蛛每天都抓取js和css文件,需不需要使用robots屏蔽掉啊?

你的JS和css会被搜索引擎所收录吗?建议你好好学习一下Robots的详细说明

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/56163.html