[导读]:连续2周发现百度蜘蛛不怕HTML文件,只爬JPG图片,不知道为什么,谷歌蜘蛛爬的正常。我的ROBOTS.TXT为空白 图片和网页蜘蛛不一样 如果2个星期没蜘蛛来爬网页基本上是降权货被...
连续2周发现百度蜘蛛不怕HTML文件,只爬JPG图片,不知道为什么,谷歌蜘蛛爬的正常。我的ROBOTS.TXT为空白
图片和网页蜘蛛不一样 如果2个星期没蜘蛛来爬网页基本上是降权货被K的征兆
###如果 Robots.txt 没有问题的话,可以参考下我们在微信中推送的一条内容:
有的时候,我们会发现百度抓取网站内容不够充分。或者因网站结构不合理导致部分内容距离首页较远,影响了百度蜘蛛的抓取路径。站长们可以通过tool.seowhy.com首页的「SEO工作者必备」进入提交通道。
针对这种情况,我们建议站长们把这些URL提取下来,通过单条URL提交通道提交给百度,百度蜘蛛会抓取URL并按照页面收录标准处理。
本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/82908.html