首页 > 问答 > discuz做的论坛已经做了伪静态怎么搜索引擎只爬取动态的

discuz做的论坛已经做了伪静态怎么搜索引擎只爬取动态的

[导读]:如果你的日志里都没静态URL的抓取,则可能是你的日志只记录了真实链接。有一些日志是这样的。这个不影响。 如果动态和静态的URL同时存在在日志里,则按 @胥帆 所讲操作下...



如果你的日志里都没静态URL的抓取,则可能是你的日志只记录了真实链接。有一些日志是这样的。这个不影响。
如果动态和静态的URL同时存在在日志里,则按 @胥帆 所讲操作下。

###

根据你上传的图片,看到spider爬取的是你网站的动态页面,检查搜索引擎查论坛首页、列表、帖子里面是否有动态链接入口,检查Sitemap。可以设置Robots.txt文件禁止百度抓取动态页面。

###

因为蜘蛛已经习惯了这个网站的动态链接,一下不容易纠正过来,修改后只能看造化了。

###

我已经设置了伪静态,但不知道为什么帖子搜索出来的都是动态的,,请教大神,谢谢!

###



###

只是做伪静态的话,检查下是否同时存在动态和静态的URL,假如现在收录的是动态的URL,不妨把动态URL做301指向静态URL。
Robots如果没写全,也会出现抓取动态URL的可能。

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/54851.html