Arbeitsmappe: Plan mit gesperrter Hypothese, Population, Abbruchregel und Schwellenwerten; UnitData mit einer Zeile pro SubscriberID; MetricRegistry; QualityChecks; Results; DecisionLog. UnitData muss aus Ereignissen mit ausdrücklichen MAX-Regeln für binäre Ergebnisse und einem Stopp bei doppelter Zuweisung aggregiert werden; Klicks niemals als unabhängige Zeilen zählen.
Primäre Nenner sind A 5.012−102=4.910 und B 4.988−98=4.890. CTR: A 421/4.910=8,574 % und B 455/4.890=9,305 %; absolute Differenz B−A=0,731 Prozentpunkte und relativer Anstieg etwa 8,53 %. Excel-Quotenformeln können =SUMIFS(UnitData[UniqueClick72h],UnitData[AssignedVariant],A2)/SUMIFS(UnitData[PrimaryDenominatorFlag],UnitData[AssignedVariant],A2) verwenden. Eine vorab genehmigte Berechnung für zwei Anteilswerte oder ein geprüftes Analysewerkzeug nutzen; die statistische Methode nicht nach Betrachtung der Ergebnisse improvisieren. Der Punktschätzer überschreitet die praktische Schwelle von +0,5 Prozentpunkten, doch die Entscheidung erfordert auch Intervall und Schutzkennzahl.
Schutzkennzahl: Abmeldungen A 23/5.012=0,459 %; B 31/4.988=0,622 %; Differenz +0,163 Prozentpunkte, unterhalb, aber nahe der Nichtunterlegenheitsgrenze von +0,2 Prozentpunkten. Das Intervall angeben, bevor die Schutzkennzahl als erfüllt bezeichnet wird. QualityChecks: Zuweisungsverteilung 50,12 %/49,88 %; mit der geplanten Zuweisung anhand der genehmigten Prüfung des Stichprobenverhältnisses vergleichen; keine doppelten Zuweisungen; alle Zuweisungen vor dem Versand; Wechsel, nicht berechtigte und nicht versendete Fälle, fehlende Nachverfolgung und Ausschlüsse je Gruppe aufführen. Sensitivitäts-CTR für alle Zugewiesenen: 8,400 % gegenüber 9,122 %. Umsatz bleibt mit n, Fehlwerten sowie Median oder Quantilen beschreibend und ist keine kausale Erfolgsaussage. Entscheidungsvorlage: fortfahren, zurückstellen oder ablehnen unter Angabe von primärem Intervall, praktischer Schwelle, Schutzintervall, Qualitätsproblemen und Abweichungen zwischen Nennerdefinitionen.