Google 的 爬虫系统 体系 是一个 复杂 平台，它负责 索引 网页并将其 存储 在 索引库 中。 分析 爬虫|机制可以帮助我们 掌握 Google 的 运作方式，从而 提高 网站的 可视性 。 例如，研究 蜘蛛池对网站内容的 判断 可以帮助我们 发布 更 贴合 搜索引擎 偏好 的内容