首页 > 问答 > 今天发现淘宝撤销了Robots协议,这是什么状况?

今天发现淘宝撤销了Robots协议,这是什么状况?

[导读]:今天发现淘宝撤销了Robots协议,这是什么状况?对于和淘宝相关的网站排名又将会有哪些影响? taobao目前只是撤销www 域名下Robots.txt协议,其它二级域名还是没有撤销 ### 自从...

今天发现淘宝撤销了Robots协议,这是什么状况?对于和淘宝相关的网站排名又将会有哪些影响?

taobao目前只是撤销www 域名下Robots.txt协议,其它二级域名还是没有撤销



###

自从2011年,百度有啊宣布破产,淘宝不少二级域名的店铺首页就可以收录了,但商品页面还是不可以的。

类似的事情,也出现在一淘和京东之间,京东刘强东2011年微博怒骂阿里系无耻的微博,不遵守Robots协议,流氓式抓取京东商品信息。

###

——心中无敌,无敌于天下。
现在的淘宝已经是一艘航母了!无谓天下贼

###

试试就发现淘宝是所有的域名都robot
淘宝问答bbs。taobao。com

如果百度连淘宝这么有名的网站都搜不出来他岂不是丢人了,抓个首页意思意思就好了,但有些百度也抓就是他不道德了
淘宝商品列表页list。taobao。com

###

Robots协议就是百度拿出来吹牛逼的,我的站设置了robots一样会被百度爬取和收录,部分内容还被放出来 并获得了排名。

###

楼主,我看到咋和你不一样,截图如下:



###

淘宝是不会放的。

###

淘宝 Robots.txt
User-agent: Baiduspider
Disallow: /
User-agent: baiduspider
Disallow: /

你可以仔细看看关于robots的解释,对于其他网站有robots的页面,搜索引擎依然会展示该页面,但是内容不会被抓取、建入索引和显示,内容都是其他的网站给的参考。

###

淘宝只屏蔽www域名下的,二级域名未屏蔽,使用Site命令www点的域名,只有1个结果,不带www时结果很多

###

淘宝想禁止百度收录,应该加上noindex标签。

###

二级域名独立屏蔽的话,店铺有这个功能吗?

###

Robots.txt仅屏蔽www下的,二级域名得独立屏蔽才行。



###

并没有撤销Robots.txt协议。

因为一直以来,都只是带www的域名禁止收录,其它二级域名的百度收录是正常的。

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/41430.html