首页 > 问答 > 日志中大量蜘蛛head请求,这是要做什么?

日志中大量蜘蛛head请求,这是要做什么?

[导读]:像下面这样抓取动作,这是要做什么啊?第一次遇到这样情况!请老司机说说! 123.125.71.18 - - [26/Jun/2016:00:01:45 +0800] "HEAD /12855.html HTTP/1.1" 200 0 "-" "Mozilla/5.0 (compatible; Baiduspider/2...

像下面这样抓取动作,这是要做什么啊?第一次遇到这样情况!请老司机说说!
123.125.71.18 - - [26/Jun/2016:00:01:45 +0800] "HEAD /12855.html HTTP/1.1" 200 0 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)"

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/41881.html