Say_dian 发表于 2012-05-17 15:10:45

用robots设置了禁止蜘蛛访问，但为什么还会有记录呢？

用robots设置了禁止蜘蛛访问，但为什么还会有记录呢？

初心 发表于 2026-05-25 10:00:59

楼主辛苦了，整理这么多内容，必须点赞收藏

缘来是你 发表于 2026-06-13 06:11:14

完全赞同，我也是这么认为的，英雄所见略同～
页: [1]
查看完整版本: 用robots设置了禁止蜘蛛访问，但为什么还会有记录呢？