网站一个栏目内容不想让搜索引擎抓取收录,但要不影响网站其他收录,要怎么做?
比如上面的图片是加超级链接的,不想让搜索引擎抓取收录到,这个超级链接。但用户可以点击打开
具体步骤,请大神讲解。
写在 Robots.txt 文件里就可以,(User-agent: * Disallow: /不想要抓取的目录名)就可以阻止搜索引擎抓取收录了。如你只是想一个页面里的某个链接或图片不让搜索引擎抓取收录可以在代码里加:Nofollow 标签(rel=’external nofollow’ 或 rel=’external nofollow’) 就可以。
###这个直接在Robots里设置就行了,站长工具中还可以检测ROBOTS的设置,是否正常抓取。
###写个Robots.txt啊
可以专门写一个文件夹不被爬抓的。
###楼上正解
###不太理解你的意思
如果你是某个栏目,或者某个链接不想让百度抓取
可以设置 Robots.txt 文件
如果不想传递某个链接的权重,直接给A链接里加Nofollow标签
如果不会用的话,直接点上面两个,搜外有相关介绍
###织梦这个挺简单的
织梦本身就有一个“Robots.txt”文件在根目录中,这个文件就是屏蔽蜘蛛抓取收录的文件,那么现在你屏蔽一个栏目在这TXT文本中添加一个,一下是添加格式:
User-agent: *
Disallow: /plus/ad_
Disallow: /plus/
Disallow: /plus/
Disallow: /plus/
Disallow: /plus/shops_
Disallow: /plus/
Disallow: /plus/
Disallow: /plus/
Disallow: /plus/feedback_
Disallow: /plus/mytag_
Disallow: /plus/
Disallow: /plus/
Disallow: /plus/
Disallow: /plus/
Disallow: /plus/
Disallow: /include
Disallow: /templets
Disallow: / 你的文件名
以上是织梦已经屏蔽一些不需要抓取的文件,那么你要添加新的在下面直接添加就好。
在一个就是你图片上的超链接,你如果就想屏蔽一个那么直接代码中添加“Nofollow”,要是想屏蔽全部图片<meta name="robots” content="nofollow” />(不建议使用)
楼上说的对
本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/64269.html