[导读]:行业站改版后路径变化产生几十万死链,边做提交边做301补救,日志中的404终于降到了两位数.这些天放开了一直隐藏的企业商铺功能后,发现日志中出现这样一些这种形式的4...
行业站改版后路径变化产生几十万死链,边做提交边做301补救,日志中的404终于降到了两位数.这些天放开了一直隐藏的企业商铺功能后,发现日志中出现这样一些这种形式的404(如图):
UE提取百度抓取404后的部分截图,get后面绿框中的链接都是“*/首页”这种形式,打比方以”http://www.index.com/101337/www.index.com“打开必须是404。
问题:1、百度蜘蛛怎么抓取到的这种根本不存在的错误页面?
2、get后面的链接和404状态码后面的链接两者是什么关系?
希望有经验的老师同学们能指点一下。
我看着怎么像是用户访问的呢?
你要知道,日志不仅仅会记录蜘蛛访问的,还会记录用户访问的,还有一些其他的信息都会记录。
日记分析,建议你用一下光年日记分析工具,挺不错的一个工具
本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/35024.html
