[导读]：网站原来采用的是二级域名（假设为A域名），现在改成二级目录（假设为B域名），已将A设置301跳转到B，那还需不需要将A设置robots屏蔽抓取呢？请大神阐述下原理。 另外：已被...
网站原来采用的是二级域名（假设为A域名），现在改成二级目录（假设为B域名），已将A设置301跳转到B，那还需不需要将A设置robots屏蔽抓取呢？请大神阐述下原理。
另外：已被百度收录的域名还会不会多次被爬行抓取？
不需要屏蔽，而且也没有必要屏蔽
###网站改版后的URL变化做好301后，不需要屏蔽，提交改版规则，屏蔽一些产生的死链即可。
收录后的链接，蜘蛛还是很继续的抓取爬行的。
本文来自投稿，不代表微盟圈立场，如若转载，请注明出处：https://www.vm7.com/a/ask/48516.html
