抓取频次是怎么分配的：45天从0到日均300次的曲线

抓取频次不是申请来的，是蜘蛛根据你站点的历史表现估出来的。我们记录了一个内容站从上线到日均 300 次抓取的完整 45 天曲线，拆给你看每个阶段发生了什么。

第 1 到 7 天：试探期

日均抓取 5 到 20 次，只抓首页和栏目页。这个阶段的任务是保证响应速度和页面稳定，任何 5xx 或超时都会延长试探期。

第 8 到 21 天：扩容期

池子入口带来稳定回访，日均抓取爬到 60 到 120 次，开始批量抓详情页。这一阶段内容更新频率决定爬升斜率：每天固定时段更新 40 页以上的站，斜率是隔天更新的 2 倍。

第 22 到 45 天：稳定期

日均 200 到 350 次并趋于平稳，蜘蛛按栏目建立抓取节奏。此时新增栏目的首次抓取平均只要 6 小时。

三个提速动作

固定更新时段并保持；把新页面在首页或热门栏目挂入口至少 48 小时；控制单页体积在 300KB 内。这三件事比任何玄学调优都管用。