[导读]:如题:求方法,完全屏蔽网站的某个JS不被蜘蛛下载抓取 反正就我知道的,Robots是不太好使,添加进去蜘蛛照样抓取。 ### User-agent: * Disallow: /xx/ 在Robots.txt文件中,使用类似这...
如题:求方法,完全屏蔽网站的某个JS不被蜘蛛下载抓取
反正就我知道的,Robots是不太好使,添加进去蜘蛛照样抓取。
###User-agent: *
Disallow: /xx/
在Robots.txt文件中,使用类似这样的代码可以做到,/xx/就是你要屏蔽的JS文件路径。
本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/38393.html
