[导读]：robots.txt文件中Disallow: /cgi-bin/这样写了之后还会不会访问目录下面的文章页或者目录页？百度之前访问或者收录了的这个目录下的页面快照还会不会更新？ 不会。 一般蜘蛛会自...
robots.txt文件中Disallow: /cgi-bin/这样写了之后还会不会访问目录下面的文章页或者目录页？百度之前访问或者收录了的这个目录下的页面快照还会不会更新？
不会。
一般蜘蛛会自动跳过bin文件
本文来自投稿，不代表微盟圈立场，如若转载，请注明出处：https://www.vm7.com/a/ask/47370.html
