沙盒期是存在的吗:200个新站的收录时间对照
我们把近三个月接入的 200 个新站按是否使用蜘蛛池分成两组,统计从上线到首页被收录的天数,结论比想象中更清晰。
对照组的分布
不接池的 96 个站,首次收录中位数 11 天,其中 23 个站 30 天后仍未被收录,这类站多数存在外链为零、内容纯采集两个特征。接池的 104 个站,首次收录中位数 41 小时,30 天未收录的只有 4 个,且都是上线当天一次性堆了 8000 页的站。
两个反常识
第一,沙盒更像是抓取资源问题而不是惩罚:接池组的页面质量与对照组无差异,但收录速度差了 6 倍。第二,一次性铺太多页面反而慢:104 个接池站里,分批上内容的站首轮抓取完成时间比一次性全上的快 2.4 倍,蜘蛛的抓取配额是按站点估的,短时间塞爆会触发限速。
落地建议
新站前两周每天上新内容控制在 30 到 80 页;首屏、栏目页、详情页三层都要有入口;上线当天提交一次 sitemap,之后每周更新一次即可,反复提交没有增益。