先判断“变差”发生在哪一层:是样本本身被换掉了,还是同一类页面的处理深度下降。抽查的目标不是证明对方不行,而是拿到证据后决定保留、改写还是退出。一个可操作的顺序是:先按页面类型分层抽样,再对同一类型做前后对比,最后看交付记录能否解释差异。
试做阶段通常由少数人做少量页面,批量阶段会换成流水线或初级执行者,这是最常见的变化来源。但表现下滑有两种性质:一种是抽样口径变了,试做时挑的是最好做的页面,批量时覆盖了难做的长尾;另一种是执行深度真的下降,同类页面在同一标准下做得更浅。前者未必是服务质量问题,后者才是需要干预的信号。
区分办法是固定一个可比子集:从批量交付里挑出与试做样本同类型、同结构、同竞争程度的页面,比如都是无参数的产品详情页,再逐项对比。如果可比子集的表现接近试做,问题在抽样;如果可比子集也明显变差,问题在执行。
不要只看“页面看起来有没有改”,要看能留下证据的改动。以下每一项都能在页面上直接核对,不需要对方提供内部数据:
抽查数量不必大,但要覆盖不同类型。假设一批交付三百个页面,可以抽十到十五个,其中一半来自试做阶段同类页面,一半来自长尾或新类型页面。这个数量只能说明方向,不能当作整体合格率。
把抽查结果与交付记录对照,会出现三种情况,对应三种决策。
情况一:记录与页面一致,但同类页面质量确实低于试做。这通常说明批量阶段换了执行标准或执行人。适用前提是你仍认可试做阶段的标准,且对方有能力回到那个标准。动作是要求对可比子集重做,并约定下一批抽同一子集复检。如果复检仍无改善,再考虑退出。
情况二:记录写得很满,页面却对不上。这是记录与实物脱节,属于流程失控。此时不适合只要求补做几个页面,因为问题在记录环节,补做也无法保证下一批。动作是暂停验收,要求提供逐页可核对的交付明细,再决定是否继续。
情况三:记录与页面一致,但试做样本本身就不具代表性。这说明当初的试做结果被高估了。动作不是追责,而是重新定义验收样本,把难做的页面类型纳入试做范围再谈批量。
保留的适用条件:可比子集表现接近试做,差异主要来自页面类型难度,且对方愿意按类型分别定标准。代价是你需要投入更多时间做分层验收。
改写的适用条件:执行深度下降但方向没错,对方能指出具体哪些环节被压缩,并给出可复检的调整方案。代价是下一批仍要抽查,不能直接恢复全量信任。
退出的适用条件:记录与实物长期对不上,或同类页面在多次复检后仍无改善。代价是前期已交付部分需要重新评估,切换服务方也会产生交接成本。这个判断不依赖单次抽查,而依赖同一子集在两次以上复检中的趋势。
抽查结果只有写回约定才有用。可以在下一批开始前明确:按页面类型分层抽样,每类至少抽三到五个;同一子集在连续两批中保持稳定,才扩大交付量。这样做的结果是,你不再需要每次全量检查,而是用少量固定样本判断流程是否稳定。若某类页面连续两批都低于试做水平,就把该类单独拿出来重谈标准,而不是整批退回。
需要提醒的是,某些页面表现波动也可能来自抓取节奏、内容更新周期或竞争页面变化,不能只凭一次抽查就断定是交付质量下降。把观察窗口拉长到两批以上,再结合交付记录判断,结论会更可靠。