首页 > 问答 > 一个几十万块的电商平台禁止搜索引擎抓取?

一个几十万块的电商平台禁止搜索引擎抓取?

[导读]:User-agent: * Disallow: / 这个是不是禁止搜索引擎抓取所有页面? 一个几十万块的平台,不应该是这样的啊。还是我弄错了? 如果你网站是不希望所有的搜索引擎抓取的话 这样写是...

User-agent: *
Disallow: /

这个是不是禁止搜索引擎抓取所有页面?

一个几十万块的平台,不应该是这样的啊。还是我弄错了?

如果你网站是不希望所有的搜索引擎抓取的话
这样写是没有问题的。

###

怎么不对,学淘宝

###

这个设置是不对的,你这禁止所有蜘蛛访问网站所有内容。

###

不是。

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/40551.html