首页 > 问答 > 抓取诊断提示robots封禁?怎么办(悬赏1元)

抓取诊断提示robots封禁?怎么办(悬赏1元)

[导读]:前几天搭建网站,把robots设置了一下禁止抓取,昨天解除封禁了,但用抓取诊断工具检测,还是提示robots封禁,不知道有什么办法能解决这个问题? 这个还真没有碰到过,会不...

前几天搭建网站,把robots设置了一下禁止抓取,昨天解除封禁了,但用抓取诊断工具检测,还是提示robots封禁,不知道有什么办法能解决这个问题?

360桌面截图20170407191927

360桌面截图20170407192005

360桌面截图20170407192043

这个还真没有碰到过,会不会 缓存啊

###

把那个空行删掉,检查下有没有错误

###

我说 兄弟不会的话找个人带带 你这样的话就算有人给你解答 也学不到真正的东西  最好还是找人带带你 要不就买教程 学习学习。

###

肯定是写错了。

###

robots禁首页的删除了,然后再提交百度。可以试着去发带你外链,吸引下蜘蛛。收录这个没办法的。只能等百度了,不会写robots

最好别写,一般后台页面代码上都有写禁止蜘蛛抓取的代码。

###

提交一下网站,之后就是等百度了,快速的办法没有

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/46477.html