首页 > 问答 > 请问一下这样写robots.txt有什么问题吗?

请问一下这样写robots.txt有什么问题吗?

[导读]:User-agent: Baiduspider User-agent: Google-bot User-agent: Bingbot Disallow: /404 Disallow: /*404 Disallow: /index Disallow: /*index Sitemap: http://www.zibeikejz.com/sitemap.xml Sitemap: http://www.zibeikejz.com/h5sitemap.xml Sit...
User-agent: Baiduspider
User-agent: Google-bot
User-agent: Bingbot
Disallow: /404
Disallow: /*404
Disallow: /index
Disallow: /*index

Sitemap: http://www.zibeikejz.com/sitemap.xml
Sitemap: http://www.zibeikejz.com/h5sitemap.xml
Sitemap: http://www.zibeikejz.com/wenda_sitemap.xml


你去看一下,我觉得有问题,你把所有的index都禁掉了

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/50127.html