sitemap生成节奏:多久更新、放多少条、怎么分级
sitemap 不是生成一次扔上去就完事的文件,它的更新节奏直接影响蜘蛛对站点更新频率的判断。
三个具体参数
更新频率:内容站每周全量更新一次,每天有新内容的站用增量接口。单文件条数控制在 1 万条以内,超过就拆分并建索引文件。优先级分级:首页 1.0、栏目页 0.8、详情页 0.6,不要全填 1.0,全高优先级等于没有优先级。
两个常见错误
把 404 和跳转链接留在 sitemap 里,蜘蛛按地图抓到一堆死链,会下调整站的抓取信任。sitemap 里放了大量不收录的参数页,稀释了有效页面的抓取机会。每月清一次死链是基本功。
与池子的配合
sitemap 负责画地图,池子负责把蜘蛛带到门口。两者是互补关系:sitemap 更新后推送一次首页链接,让蜘蛛带着新地图来抓。