[导读]:要写个robots文件,目的是禁止bing 谷歌和360索引,其余的百度、神马和搜狗等都允许,这样写对不对? User-agent: * Disallow: /zb_system/ Disallow: /zb_users/avatar/ Disallow: /zb_users/cache/...
要写个robots文件,目的是禁止bing 谷歌和360索引,其余的百度、神马和搜狗等都允许,这样写对不对?
User-agent: *
Disallow: /zb_system/
Disallow: /zb_users/avatar/
Disallow: /zb_users/cache/
Disallow: /zb_users/data/
Disallow: /zb_users/emotion/
Disallow: /zb_users/language/
Disallow: /zb_users/logs/
Disallow: /zb_users/plugin/
Disallow: /zb_users/theme/
User-agent: 360Spider
Disallow: /
User-agent: Googlebot
Disallow: /
User-agent: MSNbot
Disallow: /
搜索引擎蜘蛛对应在Robots里面的英文名字
百度Baiduspider
谷歌Googlebot
360蜘蛛:360Spider
SOSO蜘蛛:Sosospider
雅虎蜘蛛:Yahoo!
有道蜘蛛:YoudaoBot
搜狗蜘蛛:Sogou News Spider
MSN蜘蛛:msnbot/msnbot-media
必应蜘蛛:bingbot/compatible
一搜蜘蛛:YisouSpider
Alexa蜘蛛:ia_archiver
宜sou蜘蛛:EasouSpider
即刻蜘蛛:JikeSpider
想禁哪个禁哪个
###buol !
###阔以
本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/53779.html
