首页 > 问答 > 百度违反了robots.txt规则,收录了网站robots禁止的内容...

百度违反了robots.txt规则,收录了网站robots禁止的内容...

[导读]:公司网站几年来一直都是禁止百度抓取网站所有内容的 以前百度也是除了首页没有收录站内的任何页面 但是最近,不知道度娘又在犯什么神经,居然开始收录站内文章了 .... 哪...

公司网站几年来一直都是禁止百度抓取网站所有内容的

以前百度也是除了首页没有收录站内的任何页面

但是最近,不知道度娘又在犯什么神经,居然开始收录站内文章了 ....

哪位遇到过类似情况?可有解决的好办法?



可能百度系统故障

###

给百度发个电邮

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/43715.html