首页 > 问答 > robots禁止抓取整个变量的Disallow: /202/*/*/,还是把每个变量单独罗

robots禁止抓取整个变量的Disallow: /202/*/*/,还是把每个变量单独罗

[导读]:Disallow: /202/*/*/ 第一个*是变量;第二个*也是变量,我的目的第二个*下不管怎么变都不被抓,但第一个*不影响。这样写可以吗? 还是需要把每个变量项目单独列出来,像下面这样...

Disallow: /202/*/*/

第一个*是变量;第二个*也是变量,我的目的第二个*下不管怎么变都不被抓,但第一个*不影响。这样写可以吗?

还是需要把每个变量项目单独列出来,像下面这样写?

Disallow: /202/*/l*/

Disallow: /202/*/*z*/

Disallow: /202/*/*p*/

Disallow: /202/*/*k*/

写的怎么那么杂,这样写只能禁止抓取到根目录下202目录下的任意目录的下的带有l开头的所有文件的目录。

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/71708.html