如何复测并判断变化
复测必须锁定相同范围、问题集、语言和时间窗口。结论只能是改善、下降、未见明确变化或证据不足。不能把同期变化写成单一行动的因果结果。
可比条件
- 同一品牌、站点、市场与语言。
- 同一问题集版本。更换问题集时要标断点或只比较交集。
- 同等长度的时间窗口，并说明节假日或平台延迟。
- 有效样本定义一致；失败请求不进入分母，但要单独计数。
干扰因素
同期可能存在其他内容发布、竞争对手变化、模型更新或采集失败。这些因素应记在复测说明里，不能删除后再宣称干净对比。
如何解释结果
- 改善或下降：在可比条件下方向明确。
- 未见明确变化：样本足够但差异不足以判断。
- 证据不足：样本、来源或时间不满足比较。