[导读]：我最近在分析网站日志时发现，返回的结果都带有feed，这到底是什么意思？在目录有、文章也有。 /wzxmjc/feed 、/44.html/feed 。 你做个Robots.txt禁止蜘蛛爬取feed 通常有些程序都有订...
我最近在分析网站日志时发现，返回的结果都带有feed，这到底是什么意思？在目录有、文章也有。
/wzxmjc/feed 、/44.html/feed 。
你做个Robots.txt禁止蜘蛛爬取feed 通常有些程序都有订阅页面 会造成大量的重复内容被蜘蛛爬取 建站初期就应该进行屏蔽
本文来自投稿，不代表微盟圈立场，如若转载，请注明出处：https://www.vm7.com/a/ask/17488.html
