[导读]:1.最近第三方统计工具cnzz或百度统计 统计到外部来路域名来自中搜(全屏).net的流量非常多,我是个小企业站。来自中搜的比百度的还多,统计统计又统计不到具体的来路页面只...
1.最近第三方统计工具cnzz或百度统计 统计到外部来路域名来自中搜(全屏).net的流量非常多,我是个小企业站。来自中搜的比百度的还多,统计统计又统计不到具体的来路页面只显示中搜的首页,(没有在中搜做过任何广告)工具只显示受访页面是自己的域名后跟/?from=sst,请问这是怎么一回事?
2. 自己推断是中搜爬虫,每天在无耻的爬来扰乱真实流量,如果真是这样在robots.txt可否屏蔽这货的蜘蛛?
有图有真相

众所周知,国内的搜索引擎爬虫是恶名昭著的,不遵守行业规则,不尊重Robots.txt的规定,其疯狂的爬网页行为对中小型网站的危害还是不小的。
中搜的爬虫我的网站也很多,屏蔽了也没什么用!
本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/86035.html