首页 > 问答 > disallow后面为空会禁止蜘蛛访问吗

disallow后面为空会禁止蜘蛛访问吗

[导读]:robots.txt内容如下: User-agent: * Disallow: Disallow: /admin/ 现在提示管理员禁止该蜘蛛访问,访问被组织,网站排名掉完了,是什么原因呢 回答不了,没写过这个 ### 回答不了,主要是...

robots.txt内容如下:

User-agent: *
Disallow:
Disallow: /admin/

现在提示管理员禁止该蜘蛛访问,访问被组织,网站排名掉完了,是什么原因呢

回答不了,没写过这个

###

回答不了,主要是没见过这样的写法,你要是想全部禁止,直接加/禁止访问抓取根目录,不知道你加空格是要表达啥意思

###

来个大佬解答一下呀

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/97143.html