假设:在 1,800 名可投递且已同意的成年收件人中按 1:1 随机分配,具体主题相对通用主题可能提高七日内“每封已投递邮件对应的独立报名页访问”,因为它在打开前传达话题、免费和真实容量;其他邮件元素固定。只测试一次技能活动的主题模式。
主要指标:七日内产生至少一次有效 UTM 报名页访问的独立收件人 / 该组已投递邮件;按隐私安全的平台 ID 去重,来源为邮件平台+分析。安全连接配置前,完成报名不能作为主要因果指标;总完成/表单来源只作描述,不归因到组。诊断:打开和点击到页面一致性。护栏:退订/已投递、投诉/已投递、无障碍 QA 通过,以及报名关闭后不发送。
发送前随机;硬退信不进已投递分母,但分组报告;只在允许字段上检查平衡。转发邮件是污染风险,程度未知。运行到七日窗口或容量提前关闭;提前关闭会截断访问比较,不得偷看后宣布赢家。+1 点是运营重要性,不是统计证据。三次发送范围不足以确定样本;分析师需基线事件数/方差、所选错误率和检验方法。
预检:A/A 验证数量/UTM/去重;渲染/无障碍;冻结准确主题和正文;事件 QA;排除日志。解释模板:“版本相差 X 点,区间 Y;达到/未达到 1 点阈值;护栏……”若不确定性同时覆盖有意义收益和无收益,标“不确定”。采用仅限下一封技能邮件并需沟通负责人决定;不证明容量措辞适合其他受众或内容。