服务器响应时间和抓取频次的关系,比大多数人想的直接。我们给 4 个站做了前后对比:TTFB 从 1.8 秒降到 0.4 秒后,Googlebot 抓取量平均涨 42%,百度蜘蛛涨 31%。
我们怎么测
2025 年 10 月到 2026 年 3 月,我们测了 4 个站,都是软件公司官网或文档站,页面 2000 到 1.5 万。测试周期每个站 6 周:前 2 周记录基线,中间 2 周改服务器,后 2 周观察。
记录三个数:TTFB、每日抓取请求数、核心页平均抓取间隔。数据来源是服务器日志加两边站长后台。
数据
站 A:TTFB 1.9 秒降到 0.5 秒,Googlebot 抓取量涨 55%,百度涨 38%。 站 B:TTFB 1.2 秒降到 0.4 秒,抓取量涨 34%。 站 C:TTFB 2.6 秒降到 0.6 秒,抓取量涨 61%,但花了 3 周才看到变化。 站 D:TTFB 0.8 秒降到 0.3 秒,抓取量只涨了 12%。站 D 本来抓取预算就充裕,快一点没有额外收益。
结论:TTFB 超过 1.5 秒的站,改善空间大;本来就快的站,优化收益小。
为什么响应时间影响抓取
搜索引擎的抓取资源有限,它会优先抓"划算"的站。同样一秒钟,能抓 1 个页面还是 3 个页面,直接决定它给你多少抓取配额。
这不是惩罚,是资源分配。响应慢的站,抓取频次会被自动压低。
三个隐蔽的拖慢原因
第一,数据库慢查询。列表页每次请求都跑一次复杂的统计查询,TTFB 上不去。
第二,第三方脚本在服务端阻塞。有些站把统计、客服、AB 测试的脚本放在服务端渲染链路里,一个第三方接口慢,整页就慢。
第三,CDN 回源配置。CDN 缓存命中率低,每个请求都回源,TTFB 高得离谱。我们一个客户缓存命中率只有 31%,调完到 94%,TTFB 直接降了一半。
怎么改
先测:分页面类型看 TTFB,首页、列表页、详情页分别测,别只看平均值。
再改:数据库加索引、复杂查询做缓存、第三方脚本挪到客户端异步加载、CDN 缓存规则按内容类型配。
最后验证:改完等两周看抓取数据,别当天就下结论。抓取频次的变化有延迟,Google 一般 1 到 2 周,百度更慢。
一个提醒
TTFB 不是排名因素,它影响的是抓取效率。别把它和 CWV 混为一谈,CWV 是用户体验指标,TTFB 是服务器指标,两者相关但不等价。
先看抓取是不是瓶颈,再决定要不要投入服务器优化。抓取正常的站,优化 TTFB 的收益有限。
判断
服务器响应是技术 SEO 里最"底层"的一环,它不直接决定排名,但决定了搜索引擎愿不愿意多来。
如果你的站 TTFB 超过 1.5 秒,先修这个,再谈内容。
元析智能
为软件公司做 SEO 和 GEO 优化