[导读]:如下图,这条js是帝国cms用来调用文章点击数的js代码,观察了一个多礼拜的网址日志爬行记录 发现百度特喜欢抓取这类链接 少量抓取也就忍忍, 但是统计了下发现这类抓取量...
如下图,这条js是帝国cms用来调用文章点击数的js代码,观察了一个多礼拜的网址日志爬行记录
发现百度特喜欢抓取这类链接
少量抓取也就忍忍,
但是统计了下发现这类抓取量占总抓取量的30%-35%左右。
ps:是个上线3周的新站。
用Robots文件屏蔽相关JS文件即可!
本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/31832.html