Google Search Console 中的抓取统计报告在哪里？

抓取统计不在左侧导航中与其他报告并列。打开 设置，然后 抓取统计 > 打开报告。它显示 Googlebot 在最近 90 天内如何抓取你的网站。

该报告仅适用于根级资源：网域资源，或位于网域或子网域根路径的 URL 前缀资源。子文件夹的 URL 前缀资源（例如 https://example.com/blog/）没有此报告，因为抓取是按主机衡量的。

包含哪些内容

• 随时间变化的三项总计：抓取请求总数、下载总大小和平均响应时间。
• 按响应：200、301、304、403、404、5xx 等。5xx 占比上升或平均响应时间增加，就是需要采取行动的信号。
• 按文件类型：HTML、图片、JavaScript、CSS、JSON、PDF 等。
• 按目的：发现 表示 Google 此前未见过的 URL，刷新 表示重新抓取。定期发布内容却几乎没有发现类抓取的网站，值得深入排查。
• 按 Googlebot 类型：智能手机、桌面、图片、视频、页面资源加载、AdsBot 等。
• 主机状态：最近 90 天内，robots.txt 是否可抓取、DNS 是否解析成功，以及服务器是否可达。

如何解读

看趋势形态，而不是绝对数字。抓取请求下降同时伴随响应时间飙升，通常意味着 Google 因你的服务器变慢而自行限速。某一文件类型的请求突然激增，往往说明某个模板开始生成新的 URL。红色的主机状态条目比报告中的其他一切都更优先，因为 robots.txt 抓取失败会暂停对整个主机的抓取。

提示： 抓取统计没有 Search Console API。效果数据可通过 Search Analytics API 拉取，索引状态可通过 URL Inspection API 拉取，但抓取统计只能在界面中查看，因此请将服务器日志文件视为这份数据的可导出版本。

关于如何根据这些发现采取行动，请参阅 抓取预算 和 robots.txt。

AutoPSEO 如何提供帮助

由于 Google 没有开放抓取统计 API，AutoPSEO 无法镜像此报告。凡是有 API 的数据，它都会同步：连接 Bing Webmaster 密钥后，AutoPSEO 会显示每日 Bing 抓取统计，以及可按 URL 筛选的 Bing 抓取问题列表。请参阅 Bing 抓取问题。