前天抓取频次都是20w，昨天突然变成24 今天也没抓 这是什么情况？就大前天有几个404，前天多了些500 但是按比例都是 0％ robots有两天出了问题，变成网站页面了，但是昨天已经修改过来了，昨天我看晚上的时候一直在抓取各个子域名的robots.txt，我也手动去站长平台更新了 

近期百度蜘蛛还算稳定吧，就是收录差了点。

好像是这样的，都不收录了

Robots.txt我想问下，我们网站没有做robots.txt会影响吗

Robots调整一般3-7天才能够生效，继续观察吧，robots最好不要出错，我的新站（）也是前期robots出现问题导致进入沙盒考察期了，都是眼泪

最近好像百度波动挺大，慢慢看吧

如果网站没做大的调整，可能是百度的算法调整，等等就好了

roots 不是即时生效的，过几天再看看

蜘蛛也放假过年了