Beginnen met waargenomen gegevens
De resultaten zijn gebaseerd op geregistreerde blootgestelde bezoekerscohorten en overeenkomende uitkomsten. Cohortdata gebruiken UTC. Tellingen kunnen leeg zijn als er geen in aanmerking komende gebeurtenissen zijn geregistreerd; Varypilot populeert geen illustratieve prestatiegegevens.
Vertolk het geselecteerde doel, datumbereik, valuta, allocatieversie en conversievenster samen. Een rij van een onvolledige rapportagepagina mag niet worden gepresenteerd als een volledig experimenttotaal.
Conversieanalyse
De huidige binaire vergelijking maakt gebruik van een normale benadering voor het verschil in conversieverhoudingen en 95% intervallen. Per arm conversieintervallen gebruiken de Wilson methode. Een vergelijking is niet beschikbaar wanneer een arm geen bezoekers heeft of onvoldoende succes/fout telt.
Intervals en p-waarden zijn paarsgewijs; een multi-variant ontwerp heeft een eigen multi-vergelijkingsplan nodig. Een interval is onzekerheid over een schatting, geen gegarandeerde toekomstige uplift.
Analyse van de ontvangsten
Inkomsten vergelijkingen maken gebruik van een bezoeker-niveau normale benadering en vereisen ten minste 30 blootgestelde bezoekers per arm. Inkomsten bedragen en som-of-kwadraten zijn nodig voor variatie. Zwaar-getailleerde inkomsten, onvolwassen resultaten en zwakke steekproefgroottes kunnen een resultaat onbetrouwbaar maken.
Beslis maar.
Controleer de geplande steekproefgrootte, geplande duur, primaire metrieke en data-kwaliteit diagnostiek voordat u beslist. Statistische betekenis alleen niet vast te stellen zakelijke waarde, een gezonde integratie of een voltooide stoppen horizon.