首页 > 问答 > 曾经看搜外有人说过,没有参与排名意义的垃圾页面都禁止抓取掉,翻页要不要

曾经看搜外有人说过,没有参与排名意义的垃圾页面都禁止抓取掉,翻页要不要

[导读]:翻页和主页描述一样,标题就变成这种了,说实话没有参与排名的意义,要不要禁止掉? 不要禁,还是又些用的 ### 1、如果你Robots不太会用,不建议使用robots禁止太繁琐的URL;...

翻页和主页描述一样,标题就变成这种了,说实话没有参与排名的意义,要不要禁止掉?


不要禁,还是又些用的

###

1、如果你Robots不太会用,不建议使用robots禁止太繁琐的URL;

2、有的站点,翻页这种URL也都能参与关键词排名,并排名首页第一;

3、如果你不想让翻页参与排名,也可根据需求去禁止,robots生效需要时间,这个需要明了;

4、robots禁止功能有助于节省蜘蛛爬行抓取时间,不去爬行低质量或者不想参与排名的页面,robots禁止后定期查看网站日志看蜘蛛抓取情况,如果之前蜘蛛都不抓取这个,也不必要禁止。

###

直接禁止

###

其实可以不用禁止的,收录不多的情况下

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/113856.html