[导读]:上面一行,是对应的404网页文件吗? 但是我这个是PHP网站,为什么有这么的asp被抓取到404呢? 下面一行,是百度的网址,这个是什么意思,不应该显示的是我的域名下的页面...
上面一行,是对应的404网页文件吗? 但是我这个是PHP网站,为什么有这么的asp被抓取到404呢?
下面一行,是百度的网址,这个是什么意思,不应该显示的是我的域名下的页面吗,
屏蔽掉不让抓取在Robots里面
###蜘蛛路径你得看日志才行。这个看不到。
###蜘蛛爬行路径在哪里看 有大神帮我看看吗
###上面是抓取的网站网址,下面代表是百度蜘蛛抓取的
一个是网址,一个是路径吧
###另存一下
###图片太小 看不清楚啊
本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/68959.html