首页 > 问答 > 为什么网站会屏蔽蜘蛛抓取呢?(悬赏1元)

为什么网站会屏蔽蜘蛛抓取呢?(悬赏1元)

[导读]:百度抓取诊断都没问题      robots也没问题   但是为什么就抓取不了呢???问题会出在哪里呢?   最近发的文章都没 收录会不会跟这个有关系呢? 换个蜘蛛模拟抓取一下...

百度抓取诊断都没问题      robots也没问题   但是为什么就抓取不了呢???问题会出在哪里呢?   最近发的文章都没 收录会不会跟这个有关系呢?

11

换个蜘蛛模拟抓取一下

###

是不是工具的问题,换个检测工具试试看

###

看日志,不要看工具,有些工具不准的

###

看看蜘蛛来不来

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/59917.html