Husch des A/B -Tests verstehen

1. Was ist Auftrieb bei AB -Tests?
2. Wie berechnen Sie den Auftrieb bei einem Test??
3. Was sagt Ihnen das Konfidenzniveau eines A -B -Tests??

Was ist Auftrieb bei AB -Tests?

Anhebung: Der Unterschied zwischen der Leistung einer Variation und der Leistung einer Basisvariation (normalerweise der Kontrollgruppe). Wenn beispielsweise eine Variation einen Umsatz pro Benutzer von 5 USD hat und die Kontrolle einen Umsatz pro Benutzer von 4 USD hat, beträgt der Anstieg 25%.

Wie berechnen Sie den Auftrieb bei einem Test??

Der Auftrieb wird berechnet, indem die Differenz zwischen der Behandlungsumwandlungsrate und der Kontrollumwandlungsrate geteilt durch die Kontrollumwandlungsrate nimmt. Das Ergebnis ist der relative prozentuale Behandlungsunterschied im Vergleich zur Kontrolle.

Was sagt Ihnen das Konfidenzniveau eines A -B -Tests??

Normalerweise stimmen die Menschen auf α = 5%ein. Somit ist das Konfidenzniveau (1-α) die Wahrscheinlichkeit, keinen Fehler vom Typ I (α) zu erhalten. Es ist der Prozentsatz des Vertrauens in das Ergebnis, wenn der Test zeigt, dass sich die Varianten A und B nicht unterscheiden.