日志显示 蜘蛛爬一些不存在的目录 咋回事？ 作者：奈非天 • 时间：2020-03-10 • 问答 • 来源：天涯帖子 • 阅读 [导读]：不存在的页面蜘蛛爬取了，存在的没有被爬取？ 我也不知道。。。。 ### 蜘蛛返回的状态码是404才是不存在的... 不存在的页面蜘蛛爬取了，存在的没有被爬取？我也不知道。。。。###蜘蛛返回的状态码是404才是不存在的 本文来自投稿，不代表微盟圈立场，如若转载，请注明出处：https://www.vm7.com/a/ask/83970.html
