http://www.xiaozu365.com/q/index.html#/login 这个robots文件这样写对不
[导读]：User-agent: * Disallow: Disallow: /*#* Sitemap: http://www.xiaozu365.com/sitemap.xml 正确这呢 ### 一般链接里面带#符号，蜘蛛是默认不抓的吧 ### 我想屏蔽#号链接 ### Disallow: /*#* 表示禁...
User-agent: *
Disallow:
Disallow: /*#*
Sitemap: http://www.xiaozu365.com/sitemap.xml
正确这呢
###一般链接里面带#符号，蜘蛛是默认不抓的吧
我想屏蔽#号链接
###Disallow: /*#* 表示禁止抓取带有包含#的链接，前面可以是任何字符 后面也可以是任何字符
本文来自投稿，不代表微盟圈立场，如若转载，请注明出处：https://www.vm7.com/a/ask/62300.html
