Google 宣布在 Search Console 中推出增强版抓取统计报告

Google 在 Google Search Console 中推出了一份大幅增强的抓取统计（Crawl Stats）报告，为网站管理员提供有关 Googlebot 如何与其网站交互的更细粒度数据。更新后的报告提供了以往只能通过服务器日志文件分析才能获得的全新洞察。

新功能

增强版报告现在包含抓取响应时间细分，按 URL 模式和目录展示平均服务器响应时间，使网站管理员能够识别站点中响应 Googlebot 较慢的特定区块。新增的"按页面类型划分的抓取频率"视图展示了哪些类别的页面被抓取得最频繁、哪些最不频繁，有助于优化抓取预算（crawl budget）的分配。主机状态部分现在包含可追溯至 90 天的历史数据，而非此前的 30 天窗口，从而支持更长周期的趋势分析。按 HTTP 方法划分的抓取请求则提供了对 GET 与 HEAD 请求及其成功率的可见性。

对抓取预算的影响

这些增强数据使抓取预算优化更加精确。SEO 专业人士现在可以准确识别出哪些 URL 模式正在消耗不成比例的抓取资源，并通过 robots.txt 指令或 noindex 标签针对这些模式进行处理。响应时间数据有助于将服务器性能与抓取速率关联起来，证实了响应更快的站点往往会获得更多抓取预算。

SEO 社区反响

技术 SEO 顾问 Patrick Stox 指出，这份增强版报告弥补了 Search Console 数据与日志文件分析之间最大的差距之一。无需解析服务器日志即可按 URL 模式查看响应时间和抓取模式，这让抓取预算优化对更广泛的 SEO 专业人士群体变得触手可及。

建议采取的行动

利用增强版抓取统计报告，识别抓取量高但价值低的 URL 模式，将较慢的响应时间与抓取频率的变化关联起来，跟踪 robots.txt 改动对抓取分布的影响，并在站点迁移或重大内容变更后监控抓取模式。