[导读]: 查了是郑州的IP段,而且从日志来看,在查询我们数据库内容,不是正常抓取,但是日志后缀((compatible;+Baiduspider/2.0;++http://www.baidu.com/search/spider.html)看着有像是百度蜘蛛,这...

查了是郑州的IP段,而且从日志来看,在查询我们数据库内容,不是正常抓取,但是日志后缀((compatible;+Baiduspider/2.0;++http://www.baidu.com/search/spider.html)看着有像是百度蜘蛛,这个IP能不能封,还是伪装百度蜘蛛?请大神告知
* * *
百度蜘蛛一般是这3种IP,其他都是假蜘蛛
###可以确定不是用户,
有可能是百度某个蜘蛛。
###
不是百度蜘蛛 可以封掉 而且不知名
不是百度蜘蛛
###不是百度蜘蛛可以封
本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/56419.html
