Beginnen Sie mit beobachteten Daten
Ergebnisse werden aus aufgezeichneten exponierten Besucherkohorten und übereinstimmenden Ergebnisereignissen erstellt. Kohortendaten verwenden UTC. Zählungen können leer sein, wenn keine förderfähigen Ereignisse aufgezeichnet wurden; Varypilot füllt keine illustrativen Leistungsdaten aus.
Interpretieren Sie das ausgewählte Ziel, den Datumsbereich, die Währung, die Zuweisungsversion und das Umwandlungsfenster zusammen Eine Zeile von einer unvollständigen Berichtsseite darf nicht als vollständige Versuchssumme dargestellt werden.
Konversionsanalyse
Der aktuelle Binärvergleich verwendet eine normale Approximation für den Unterschied in den Konversionsanteilen und 95% Intervallen. Pro-Arm-Konversionsintervalle verwenden die Wilson-Methode. Ein Vergleich ist nicht verfügbar, wenn einer der beiden Arme keine Besucher hat oder nicht genügend Erfolg / Misserfolg zählt.
Intervalle und p-Werte sind paarweise; ein multivariantes Design benötigt einen eigenen Multi-Vergleichsplan. Ein Intervall ist Unsicherheit über eine Schätzung, keine garantierte zukünftige Anhebung.
Ertragsanalyse
Einnahmenvergleiche verwenden eine normale Näherung auf Besucherebene und erfordern mindestens 30 exponierte Besucher pro Arm. Einnahmensummen und Quadratsummen werden für die Varianz benötigt. Starke Einnahmen, unreife Ergebnisse und schwache Stichprobengrößen können ein Ergebnis unzuverlässig machen.
Treffen Sie die Entscheidung
Vor der Entscheidung ist der geplante Stichprobenumfang, die geplante Dauer, die primäre Metrik und die Datenqualitätsdiagnostik zu überprüfen; die statistische Signifikanz allein bestimmt nicht den Geschäftswert, eine gesunde Integration oder einen abgeschlossenen Stopphorizont.