先给结论:额度有限时,优先选“能改变你下一步动作”的样本,而不是选数量最多、覆盖最全、看起来最像全站缩影的样本。假设你手上有 200 个待查 URL,但当天只能提交 30 次查询,那么真正要问的不是“哪 30 个最有代表性”,而是“哪 30 个查完之后,我能决定继续、停止还是换方向”。
多数人下意识会按比例抽样:首页抽几个、栏目页抽几个、深层页抽几个,让样本看起来均衡。这种做法适合回答“整体大概是什么状态”,但它对额度有限的人往往信息量偏低,因为每类只抽一两个,任何异常都无法判断是普遍问题还是个案。
更有信息量的是决策样本。它的挑选标准是:结果无论偏向哪一边,都会让你做出不同的下一步。比如同一批新发布的页面,如果查询显示大部分尚未被抓取,你的下一步是继续等或补内链;如果显示已抓取但未收录,下一步就变成检查内容质量和重复度。这两种结果导向完全不同的动作,因此这组样本值得优先花额度。
判断方法很简单:给每个候选样本写一句“如果结果是 A 我做什么,如果是 B 我做什么”。写不出两种不同动作的样本,先往后排。
平均样本告诉你常态,边界样本告诉你范围。额度有限的情况下,范围的边际价值通常更高,因为它能一次性排除掉大量可能性。
这四类分别对应时间边界、结构边界、变更边界和重要性边界。查完它们,你得到的不是“平均收录率”,而是“问题可能出在哪一段”。代价是:你无法据此估算全站比例。如果汇报或决策确实需要比例数字,边界样本不够用,这时应换回分层抽样,并接受每层样本量很小、结论只能当线索。
一次性提交 30 个查询,最大的风险是发现选错对象后没有余量修正。更稳的做法是把额度切成两轮,例如第一轮 20 个、第二轮 10 个。
第一轮选最不确定、最能区分方向的样本。拿到结果后,观察是否出现成组的一致现象:如果 20 个里有明显多数落在同一状态,说明方向已经清楚,第二轮可以转向验证这个现象是否延伸到另一类页面;如果结果分散、没有主导模式,说明你的分类维度选错了,第二轮应换一个维度重选,而不是把剩余额度继续投在同一维度上。
这个动作直接改变下一步:一致的结果让你从“继续查”转向“开始处理”,分散的结果让你从“查页面”转向“重新定义分组”。两种走向都比把额度平均撒完更有用。
以下为假设例子,仅用于说明比较方法,不代表任何真实项目结果。
假设某站点改版后新增 200 个 URL,当天额度 30 次。方案一:按栏目比例抽 30 个,追求代表性。方案二:先查 10 个最新页面、10 个最深页面、10 个改版前已有展现的页面。
方案一得到的是一个混合比例,但每类只有几个,出现异常时无法归因。方案二如果发现最新页面多数未处理、深层页面多数未抓取、旧页面状态正常,就能把问题定位到“新内容处理”和“结构可达性”两个方向,下一步是补内链和提交入口,而不是全站排查。方案二的代价是放弃了全站比例估算,若你需要向他人说明整体覆盖率,仍需另做一轮分层抽样。
样本挑选完成后,把当时的判断条件写下来:为什么选这几个、预期看到什么、看到什么会改变动作。查询结果只反映查询时点的状态,抓取和索引本身存在延迟,单次归零或单次异常都不能单独证明处理正确或错误,也可能来自提交时间差、页面本身尚未稳定、或查询对象选得不对。
因此每次用额度前,先写下这次要回答的一个问题;查完后对照记录,决定是继续扩大样本、更换分组维度,还是停止查询转入修改。额度有限时,真正稀缺的不是查询次数,而是每次查询之后你能明确做出的那个下一步。