首页 > 问答 > 网站地图抓取出现大量403,空间商如此回复!!!(悬赏3元)

网站地图抓取出现大量403,空间商如此回复!!!(悬赏3元)

[导读]:网站本来有200多个页面,无论是用站长工具、爱站工具、金花工具、现在抓取到的都不到100页面,很多都提示403,而这个情况是最近几个月才有的,之前都是正常的,这个是什么...

网站本来有200多个页面,无论是用站长工具、爱站工具、金花工具、现在抓取到的都不到100页面,很多都提示403,而这个情况是最近几个月才有的,之前都是正常的,这个是什么原因引起的?

QQ截图20191129133358

QQ图片20191129133308

QQ图片20191129133317

网站本来有200多个页面,无论是用站长工具、爱站工具、金花工具、现在抓取到的都不到100页面,很多都提示403,而这个情况是最近几个月才有的,之前都是正常的,这个是什么原因引起的?


用的虚拟空间吧 ,换VPS

###

换VPS啦

###

设置没做好

###

别人已经给了你专业的回答了啊,这回答一点毛病也没有,就是你目前的情况

###

1、你的站点是200URL

2、现在抓取页面100URL,大多是403返回码

3、你的意思是网页不能正常打开,服务商说是防止cc攻击,启用保护机制

4、你是用什么抓取,还有设置频率如何,对否自己多次同一ip访问站点也会导致页面无法打开

5、如果是访问量过大,处于保护会拦截几分钟返回403,这个也属于正常,只要在大部分时间内网页是正常就好

6、看网站日志看看这个403出现在那个时间段,你访问站点是否正常打开

###

网站设置问题

###

人家说的没毛病

###

他不是说了吗,cc抓取频率过高造成的,换一个工具试试呢

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/96909.html