首页 > 问答 > 查看网站日志,大量不存在目录被百度抓取成功。正常吗?

查看网站日志,大量不存在目录被百度抓取成功。正常吗?

[导读]:今天查看网站日志,结果发现有很多不存在的目录被百度蜘蛛抓取后返回200 0 0。我就纳闷了,都是些不存在的目录,什么情况这是? 还有111.173.152.227这个ip段的蜘蛛我好像都没...

今天查看网站日志,结果发现有很多不存在的目录被百度蜘蛛抓取后返回200 0 0。我就纳闷了,都是些不存在的目录,什么情况这是?
还有111.173.152.227这个ip段的蜘蛛我好像都没见过,代表什么意义了?

不正常

###

不正常,把这些不存在的目录收录找到,先设置Robots.txt 在提交不百度站长工具死链。

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/86689.html