[导读]:网站有一个二级域名,但与www不在同一个服务器上,这样写robots.txt文件的时候,二级域名需要独立写吗? 还有如果二级域名不想让蜘蛛抓取的话,该如何用robots.txt屏蔽? 万分感...
网站有一个二级域名,但与www不在同一个服务器上,这样写robots.txt文件的时候,二级域名需要独立写吗?
还有如果二级域名不想让蜘蛛抓取的话,该如何用robots.txt屏蔽?
万分感谢大家的解答!
应该是要分来写的,搜外本身就是个很好的例子啊。
比如:http://www.seowhy.com/Robots.txt和http://ask.seowhy.com/robots.txt
本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/33789.html
