Книга: Plan с заблокированными гипотезой, совокупностью, остановкой и порогами; UnitData с одной строкой на SubscriberID; MetricRegistry; QualityChecks; Results; DecisionLog. UnitData агрегируется из событий с явными правилами MAX для бинарных результатов и остановкой при дублирующемся распределении; никогда не считайте переходы независимыми строками.
Основные знаменатели: A 5 012−102=4 910 и B 4 988−98=4 890. CTR: A 421/4 910=8,574%, B 455/4 890=9,305%; абсолютная разница B−A=0,731 процентного пункта, относительный прирост около 8,53%. Формулы доли Excel могут использовать =SUMIFS(UnitData[UniqueClick72h],UnitData[AssignedVariant],A2)/SUMIFS(UnitData[PrimaryDenominatorFlag],UnitData[AssignedVariant],A2). Используйте заранее утверждённый расчёт доверия для двух долей или проверенный аналитический инструмент; не импровизируйте статистический метод после просмотра результатов. Точечная оценка превышает практический порог +0,5 п. п., но решение также требует интервала и защитной метрики.
Защитная метрика: отписки A 23/5 012=0,459%; B 31/4 988=0,622%; разница +0,163 п. п., ниже, но близко к границе +0,2 п. п. Сообщите интервал до признания условия выполненным. QualityChecks: распределение 50,12%/49,88%; сравнить с планом утверждённой проверкой соотношения выборок; ноль дубликатов распределения; все распределения предшествуют отправке; перечислить по группам перекрёстное воздействие, недопустимость, неотправленные, пропуски отслеживания и исключения. CTR чувствительности по всем распределённым: 8,400% против 9,122%. Выручка остаётся описательной с n, пропусками и медианой или квантилями, а не причинным доказательством успеха. Шаблон решения: продолжить, отложить или отклонить со ссылкой на основной интервал, практический порог, интервал защитной метрики, проблемы качества и различия определений знаменателя.
ChatGPT
