[导读]：网站某一栏目下的文章都不收录，而其他栏目下的文章都能收录，是何原因？ 之前用robots.txt做了设置，Disallow: /jitapu/ _ .html，但是这个知识不收录Disallow: /jitapu/12_2.html，而对于...
网站某一栏目下的文章都不收录，而其他栏目下的文章都能收录，是何原因？
之前用robots.txt做了设置，Disallow: /jitapu/_.html，但是这个知识不收录Disallow: /jitapu/12_2.html，而对于Disallow: /jitapu/12.html是可以的收录的，但却没收录，后来把robots协议中的这条删除，发现整个栏目的文章还是没收录，不知是和原因？求解
对该链接进行模拟蜘蛛抓取下，看是否可以正常抓取。
如果正常可以给链接多增加一些收录入口，可以在首页放上该链接试试。
同时给改链接多做些外链引蜘蛛来抓取。还有看下内容质量是否可以。
本文来自投稿，不代表微盟圈立场，如若转载，请注明出处：https://www.vm7.com/a/ask/36581.html
