首页 > 问答 > 日志蜘蛛问题

日志蜘蛛问题

[导读]:日志上有很多这种蜘蛛 Mozilla/5.0+(compatible;+Baiduspider-render/2.0;++http://www.baidu.com/search/spider.html) 爬取是404状态,请问怎么处理呢?另外查询蜘蛛的IP好像又不是百度的蜘蛛,哪位大...

日志上有很多这种蜘蛛 Mozilla/5.0+(compatible;+Baiduspider-render/2.0;++http://www.baidu.com/search/spider.html) 爬取是404状态,请问怎么处理呢?另外查询蜘蛛的IP好像又不是百度的蜘蛛,哪位大神遇到过这问题,该怎么处理

我也想知道

###

占前排学习

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/83025.html