首页 > 问答 > 问一个关于robots协议的问题

问一个关于robots协议的问题

[导读]:前几天公司网站被挂马了,收录突然增加几百条,有点奇怪,于是我site一下看看最近收录的是什么,因为网站一直没有更新,而且是老站,不可能一下子收录增加几百条,然后...

前几天公司网站被挂马了,收录突然增加几百条,有点奇怪,于是我site一下看看最近收录的是什么,因为网站一直没有更新,而且是老站,不可能一下子收录增加几百条,然后我发现好多是垃圾信息,原来网站被挂马了,这些垃圾文件都是放在include目录文件夹的几个文件夹里面。网站是dedecms做成的,而我在写robots文件的时间,明显是禁止蜘蛛抓取include文件目录的,为什么还有收录呢?



问题:我在Robots.txt中设置了禁止百度收录我网站的内容,为何还出现在百度搜索结果中?

百度官方回复:如果其他网站链接了您robots.txt文件中设置的禁止收录的网页,那么这些网页仍然可能会出现在百度的搜索结果中,但您的网页上的内容不会被抓取、建入索引和显示,百度搜索结果中展示的仅是其他网站对您相关网页的描述。



###

你这个的情况,不是上面那位说的那样,你这属于正常的快照。百度对Robots协议不是太遵守的。你可以试着投诉几次。

###

我在Robots.txt中设置了禁止百度收录我网站的内容,为何还出现在百度搜索结果中?
如果其他网站链接了您robots.txt文件中设置的禁止收录的网页,那么这些网页仍然可能会出现在百度的搜索结果中,但您的网页上的内容不会被抓取、建入索引和显示,百度搜索结果中展示的仅是其他网站对您相关网页的描述。

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/20556.html