首页 > 问答 > robots.txt已经屏蔽了蜘蛛抓取,为什么还是会搜到网站,求大神帮

robots.txt已经屏蔽了蜘蛛抓取,为什么还是会搜到网站,求大神帮

[导读]:这是一个测试网址,网站还没有上线,但是测试版网址却被收录,这种情况应该怎么处理,我们的目的是不要搜索到测试版的网站 回头把测试网址解析删掉就行了 ### 看看删除的...

这是一个测试网址,网站还没有上线,但是测试版网址却被收录,这种情况应该怎么处理,我们的目的是不要搜索到测试版的网站

回头把测试网址解析删掉就行了

###

看看删除的干净不?

###

可能设置前已经抓取了,Lee曾公开说过Robots生效时间是一周,你可以在一周后查看下。

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/47754.html