急！百度工具抓取诊断：抓取异常是怎么回事？robots.txt没设置错
[导读]：是个新网站，用wordpress建的，在网站还没建好时，在wordpress后台 设置了robots封禁，勾选了 “建议搜索引擎不索引本站点”。网站建好就解禁了，提交百度站长工具。使用抓取时...
是个新网站，用wordpress建的，在网站还没建好时，在wordpress后台 设置了robots封禁，勾选了 “建议搜索引擎不索引本站点”。网站建好就解禁了，提交百度站长工具。使用抓取时老是抓取异常。如下图 ，求答案 万分感谢啊！
时间问题，在等等吧！！最好把Robots文件改成全站允许抓取。等解封之后再做其他目录的屏蔽！
网站进行改版robots屏蔽了5天，robots屏蔽后已经生效了，在第5天中午，robots打开屏蔽。我花了4天百度才解除封禁。
中间的操作是：
打开屏蔽，打开时候应该是直接用：allow:/
2.在进行百度站长平台robots工具进行检测。并且使用抓取诊断工具对首页进行抓取，爬取失败后，对诊断结果进行反馈。爬取详情中提交更新。
3.在站点通知中找到，百度私信中的robots屏蔽通知，点击进入看到：robots更新。通知百度更新。
然后自己做好内容即可！如果着急，还可以直接在百度站长平台中进行投诉反馈。
性能打分100，这是怎么做到的
本文来自投稿，不代表微盟圈立场，如若转载，请注明出处：https://www.vm7.com/a/ask/34804.html
