[导读]:比如: http://www.abcde.com/forum.php?mod=forumdisplayfid=2428 [?] 和 http://www. [?] [?] abcde.com/forum.php?mod=forumdisplayfid=1 [?] 7659这两个页面百度蜘蛛就天天进来抓取,日志里也天天看到,但就是...
比如:http://www.abcde.com/forum.php?mod=forumdisplay&fid=2428[?]和 http://www.[?][?]abcde.com/forum.php?mod=forumdisplay&fid=1[?]7659这两个页面百度蜘蛛就天天进来抓取,日志里也天天看到,但就是这两个页面 其他的比如:http://www.[?][?]abcde[?].com/forum.php?mod=forumdisplay&fid=[?]32478 大量的其他页面就不进来抓取,碰都不碰,我这些页面都是有专人维护,定期更新的,我想知道这是什么原因?有什么办法能够让百度蜘蛛去其他页面,链接也买了,内容也更新了,就是不去碰其他页面!!!!
可以是结构的问题 调整一下
###可以把抓取的页面放入到抓取的页面吸引蜘蛛来抓取,还可以多调用点相关推荐的
楼主问题解决了嘛,我遇到了和你一样的问题,请问你是怎么解决的呀
###将所有页面URL 做一个网站地图,提交给百度站长资源平台,让蜘蛛轻松抓取到所有页面
###交换一些链接,友链多了,蜘蛛自然来的次数就多了。
首页弄得丰富些,让蜘蛛可以多找到链接可以爬行。
如果蜘蛛每天抓取次数上万,那任何页面都会爬行到的。
###首先,你的内链没有做到位,其次。你的网站栏目是不是有被Robots禁止访问的。在一个,可以通过百度提交入口把你想提交的内容提交给百度蜘蛛,不过每周只能提交200条内容
本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/69037.html