最近手里的一个网站,网站内容每天都更新,但通过日志分析发现,百度蜘蛛每天都过来抓取,但停留的时间基本上都是零。这个是什么原因造成的?如何解决?请大家各抒己见……
个人观点:
1、网站每天更新内容太少;
2、文章质量不高。
我感觉是网站都没有蜘蛛爬!下面是在网上摘录!你可以参考!
一、是否有网站地图
当蜘蛛拥有了这张路线图的时候, 网站地图对于蜘蛛来说就是一幅爬行路线图。那么在网站上爬行就不会那么的费劲,而且也不会有随时会转到头晕的感觉。网站地图是专门给蜘蛛用的目的就是减少蜘蛛爬行时间,加快蜘蛛爬行速度,终究,如果你网站不配地图的话,就像自己去一个陌生的地方,没有地图,就要靠盲目的找了这要花的时间多了多少,笔者不知道。所以,同样的道理,网站地图对于蜘蛛来说也一样的重要,省什么都不要省了地图,战前的准备、战中的方向、战后的总结。
二、是否设置404页面
其实按笔者的实战心得来说, 很多的站长在网站优化过程中对于这个根本不在意。这个对于一个存在死链的网站有着很重要的意义,因为他可以帮网站告诉蜘蛛,当它爬到死角的时候,给他一条进去返生之道,404页面就是为了防止蜘蛛走进死胡同出不来而准备的谁敢保证自己的网站不会有死链的呈现,死链对于一个网站的影响是很重要的如果网站的死链过多,而又缺少404页面,那么用站长工具查询分析的时候,会发现,很多的页面都抓取错误,这一方面说明,网站对蜘蛛的友好度不够,让蜘蛛产生排斥的心理。所以,404页面一定要给网站来上一个,反正又不占多大的空间,为什么不搞上呢?长沙网站优化的网站当初处于这个考虑,也设置了404页面。
三、是否导出链接过多
对于网站的权重集中有很大的影 响,一个网站过多的导出链接。对于蜘蛛的逗留时间有很大的催促作用,因为当蜘蛛爬行你网站的时候,一般都是由头爬到尾的那么蜘蛛爬行有时候是按广度爬行法,有时按深度排行法,当它按广度排行法的时候,刚好爬到尾部而还没进入内页,就给他来一条导出链接,那么蜘蛛也会依照其导出链接出去的这样就是经常看到蜘蛛来了但是没收录任何页面的原因了所以,网站不要设置过多的导出链接,给你网站没有任何的利益。
我认为,你的网站可能并没有来百度蜘蛛,这日志分析出来的蜘蛛来访次数,是你每天通过站长工具查询时的模拟蜘蛛,也就是所说的“假蜘蛛”。
再者,总抓取量,也并不是蜘蛛的抓取量,而是你在发外链时,或者别的什么途径引来的用户浏览,留下来的记录。
建议:打开日志本身,把那些IP输入百度里,查询一下,就知道是不是百度蜘蛛了。
IP分析,如:
(BaiDu Spider) 其实是站长工具
(BaiDu Spider) 这才是百度蜘蛛
(BaiDu Spider) 这才是百度蜘蛛
应该是假蜘蛛吧
###蜘蛛也有的假的
###查一下真假蜘蛛
###前期多更新写质量高的内容
本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/84905.html