为什么有些页面很垃圾完全不符合百度的收录标准，百度收录的却很快？这点做外推引蜘蛛的同学肯定知道。给你一个没有收录的页面你能说出没有收录的原因吗？
虽然收录和很多因素有关，但是我觉得收录还有很多我们不知道的规则。
现在收录给我的感觉是充满随机性，碰上了就收录，碰不上就等下次。

随机抓取是真的，所以存在一定的收录随机性。记得国平说收录和权重、页面质量、抓取效率等有关，我觉得其实不然。
一个页面是否收录，是受到很多因素影响的，比如说一个页面可能正在一个栏目的首页，这时候蜘蛛恰巧来就抓到了，所以就收录了；但是也可能恰巧就被淹没了，甚至被淹没的很深，蜘蛛根本没有路径去到哪里，收录也就无从谈起。所以一个页面是否被收录确实存在随机性，因为蜘蛛不可能每时每刻就守在哪里。
再比如有些收录是有规律的，但是人们没有发现而已。比如一个分类信息网站的列表页面，你段时间内发大量的内容，很可能就不收录，因为蜘蛛会总结一些规律，一个人用户发很多时候有群发嫌疑，所以你不知道，就会觉得蜘蛛很奇怪。
最后说一点，蜘蛛抓取到的URL不一定都会去抓取下页面有什么的，而是会根据一些链接关系计算或者随机性抓取一些url进行分析的，所以你说的那些随机性完全可以理解，无需进行分析和研究。
学seo还是不要钻一些死角，看整体和大局，比如一个站权重和页面质量很高，而收录很差，这才是问题，至于一些特殊页面的收录与否存在随机性，没有办法具体的分析的。