3月底4月初的时候放出了网站，因为网站之前每一内容没有改好，所以一直是robots禁封所有蜘蛛的，然后在4月上旬的时候解开，在站长平台检测robots是否更新，又跑到百度站长平台去提交sitemap，又是用抓取诊断抓取网站首页，网站robots和sitemap。然后过几天发现site域名出现结果了，但是下面提示：

由于该网站的robots.txt文件存在限制指令（限制搜索引擎抓取），系统无法提供该页面的内容描述 - 了解详情

说明首页被屏蔽抓取快照，以为是百度的动作太慢，

所以又重复几个上面的工作通过平台检测robots是否有问题，通过抓取诊断检测robots和sitemap是否抓取有问题。网站内每天都有一定量的更新：（主动推送和自动更新都有），希望尽快释放首页快照，尽快收录网站其他页面。

发现昨天的索引值增加了：

另外还有一个发现，目前因为Site不出任何页面，所以搜索网站整站名称，现在是没结果。但是现在如果使用之前搜索的一个特定关键词，这个关键词在网站名中，那么居然是有结果的，只不过下面的描述部分依然和上面的一样：

由于该网站的robots.txt文件存在限制指令（限制搜索引擎抓取），系统无法提供该页面的内容描述 - 了解详情

所以，现在困惑来了，当时是用robots屏蔽了蜘蛛，网站改好之后又解除屏蔽，并且通过多种方法告诉蜘蛛我解除了你可以来了。网站在百度的表现就是先有首页site,但提示显示被屏蔽，然后site全无，但是用特定关键词可以搜索到首页，同时也是显示被屏蔽。

这个到底发生了什么？

之前的收录掉了就会Site不出来，索引有的是后面收录了的文章只是没放出来，新站收录放出来很慢 我的网站也是这样 大新闻网