Anonymous 发表于 2014-11-23 19:09:05

百度，搜狗这些搜索引擎，如果只抓取每个网站的首页需要多大，如果抓取首页和首页链接

百度，搜狗这些搜索引擎，如果只抓取每个网站的首页需要多大，如果抓取首页和首页链接的内页有需要多大？.

追风追雨追太阳 发表于 2026-03-13 09:33:37

完全赞同，我也是这么认为的，英雄所见略同～
页: [1]
查看完整版本: 百度，搜狗这些搜索引擎，如果只抓取每个网站的首页需要多大，如果抓取首页和首页链接