首页 > 问答 > 百度蜘蛛每天只进来抓取几个固定页面,其他页面碰都不碰(悬赏

百度蜘蛛每天只进来抓取几个固定页面,其他页面碰都不碰(悬赏

[导读]:比如: http://www.abcde.com/forum.php?mod=forumdisplayfid=2428 [?] 和  http://www. [?] [?] abcde.com/forum.php?mod=forumdisplayfid=1 [?] 7659这两个页面百度蜘蛛就天天进来抓取,日志里也天天看到,但就是...

比如:http://www.abcde.com/forum.php?mod=forumdisplay&fid=2428[?]和 http://www.[?][?]abcde.com/forum.php?mod=forumdisplay&fid=1[?]7659这两个页面百度蜘蛛就天天进来抓取,日志里也天天看到,但就是这两个页面    其他的比如:http://www.[?][?]abcde[?].com/forum.php?mod=forumdisplay&fid=[?]32478   大量的其他页面就不进来抓取,碰都不碰,我这些页面都是有专人维护,定期更新的,我想知道这是什么原因?有什么办法能够让百度蜘蛛去其他页面,链接也买了,内容也更新了,就是不去碰其他页面!!!!

可以是结构的问题 调整一下

###

可以把抓取的页面放入到抓取的页面吸引蜘蛛来抓取,还可以多调用点相关推荐的


###

楼主问题解决了嘛,我遇到了和你一样的问题,请问你是怎么解决的呀

###

将所有页面URL 做一个网站地图,提交给百度站长资源平台,让蜘蛛轻松抓取到所有页面

###

交换一些链接,友链多了,蜘蛛自然来的次数就多了。

首页弄得丰富些,让蜘蛛可以多找到链接可以爬行。

如果蜘蛛每天抓取次数上万,那任何页面都会爬行到的。

###

首先,你的内链没有做到位,其次。你的网站栏目是不是有被Robots禁止访问的。在一个,可以通过百度提交入口把你想提交的内容提交给百度蜘蛛,不过每周只能提交200条内容

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/69037.html