首页 > 问答 > 如何批量查询百度蜘蛛是真实的还是伪蜘蛛?(悬赏1元)

如何批量查询百度蜘蛛是真实的还是伪蜘蛛?(悬赏1元)

[导读]:我知道目前最简单的方法就是用nslookup,这种只能一个一个查,太不方便,有没有办法用批量的方法查询ne ? 说实在的我不看这东西。。。。 ### 只能是一个一个的查  还有 一种...

我知道目前最简单的方法就是用nslookup,这种只能一个一个查,太不方便,有没有办法用批量的方法查询ne ?

说实在的我不看这东西。。。。

###

只能是一个一个的查  还有 一种方法就是用登陆这个网站,把ip放进去 查看地址

###

1.查看UA,如果UA都不对,可以直接判断非百度搜索的蜘蛛,目前对外公布过的UA是:

移动UA:Mozilla/ (linux;u;Android ) APPleWebKit/ (KHTML,like Gecko) Version/ Mobile Safari/ (compatible; Baiduspider/ +)

PC UA:Mozilla/ (compatible; Baiduspider/ +)

新增渲染UA:

移动UA:Mozilla/ (iPhone; CPU iPhone OS 9_1 like Mac OS X) AppleWebKit/ (KHTML, like Gecko) Version/ Mobile/13B143 Safari/ (compatible; Baiduspider-render/ +)

PC UA:Mozilla/ (compatible; Baiduspider-render/ +)

2.反查IP

站长可以通过DNS反查IP的方式判断某只spider是否来自百度搜索引擎。根据平台不同验证方法不同,如linux/windows/os三种平台下的验证方法分别如下:

1).在linux平台下,您可以使用host ip命令反解ip来判断是否来自Baiduspider的抓取。Baiduspider的hostname以 *. 或 *. 的格式命名,非 *. 或 *. 即为冒充。

2).在windows平台或者IBM OS/2平台下,您可以使用nslookup ip命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入nslookup (IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以*. 或*. 的格式命名,非 *. 或 *. 即为冒充。

3).在mac os平台下,您可以使用dig 命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入dig (IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以 *. 或*. 的格式命名,非 *. 或 *. 即为冒充。

###

这个查了也没什么用吧

###

我现在也非常好奇这个问题,你解决了吧?教教我呗 

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/87569.html