[导读]:刚建的网站怎么才能让蜘蛛不抓取? 屏蔽掉 ### 屏蔽掉 ### Robots屏蔽 ### 去看看淘宝的网站。Robots协议,禁止指定或全部蜘蛛抓取。 ### 网站上线前在Robots文件里写上禁止所有搜索...
刚建的网站怎么才能让蜘蛛不抓取?
屏蔽掉
###屏蔽掉
###Robots屏蔽
###去看看淘宝的网站。Robots协议,禁止指定或全部蜘蛛抓取。
###网站上线前在Robots文件里写上禁止所有搜索引擎抓取
User-agent: *
Disallow: /
如有不会的随时追问
本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/99728.html