Så här granskar du dina A/B-testresultat för kampanjer
Du kommer att lära dig
Läs mer om vilka data du kan hitta på resultatsidan för A/B-test och vad var och en av dessa indikatorer betyder. Informationen i denna guide gäller både A/B-testning med e-postkampanjer och sms-kampanjer.
A/B-testning kampanjer kan ge värdefulla insikter om din målgrupp genom att göra det enkelt att avgöra vilka förändringar som ska göras i din utskicksstrategi. Du får inte bara reda på den vinnande variation för ett A/B-test, utan också andra viktiga faktorer, som vinstkonfidensprocenten och vinnande mättal-detaljer.
A/B-testresultat
För att se resultatet av ett A/B-test:
- Navigera till den kampanj som du ska testa.
- Välj fliken A/B-testresultat i huvudrapporten för kampanj.
Testöversikt
I avsnittet Testresultat ser du en ögonblicksbild med följande:
- Vinnande variation
När ett test har slutförts visas variation som vann. - Status
Om A/B-testet är pågående (dvs. samlar in analyser) eller avslutat. - Sannolikhet för vinst
Hur sannolikt det är att den vinnande variation verkligen hade den högsta öppna, klickade eller placerade beställningsfrekvensen efter att ha tagit hänsyn till slumpen i Konto, och om denna sannolikhet anses vara statistiskt signifikant. - Lyft
Hur mycket bättre den vinnande variation presterade jämfört med den andra variation. Beräknas baserat på den vinnande mättalen (dvs. öppningsfrekvens, klickfrekvens eller placerad beställningsfrekvens). För tester med 3+ variationer används det näst bäst presterande testet som jämförelse. - Vinnande mättal
Den vinnande variation:s resultat för den mättal som användes för testet. Om till exempel öppningsfrekvens valdes som vinnande mättal, skulle öppningsfrekvensprocenten visas.
Under dessa resultat kan du se öppnings-, klick- och placerad beställningsfrekvens för varje variation i testet.
Hur lyftkraften beräknas
Lyftprocenten är annorlunda än den procentandel som visas för din vinst variation. Detta beror på att procentsatsen som visas bredvid varje variation är andelen personer som interagerade med e-posten (öppnade, klickade, gjorde en beställning) medan lyftet är den procentuella förbättring som vinnaren hade jämfört med de andra variation.
Om du till exempel använder klickfrekvens som din vinnande mättal och variant A har 5/100 (5%) mottagarklick och variant B har 4/100 (4%) mottagarklick, är skillnaden mellan varianterna 1 klick. Det innebär att lyftet var 1/5 (20%). Med andra ord var lyftet 20% med variation A som hade en klickfrekvens på 5% och variation B som hade en klickfrekvens på 4%.
Personliga resultat från variation
Möjligheten att välja en teststrategi är endast tillgänglig för Konto med mer än 400.000 totala profiler. Om ditt Konto inte kvalificerar sig kommer Klaviyo att använda den vinnande variation teststrategin.
Om du valde alternativet att anpassa variationen för varje mottagare, kommer du att se något annorlunda mättal på testresultatsidan, inklusive följande:
- Totalt A/B-testlyft
Hur mycket bättre den bästa variation presterade jämfört med den näst bästa variation. Beräknas baserat på vinnande mättal (dvs. öppningsfrekvens eller klickfrekvens). - Personalization lift
Procentandel av hur mycket mer framgångsrikt det personaliserade testet var jämfört med ett vanligt A/B-test. - Personalisering klickfrekvens
Den genomsnittliga klickfrekvensen bland alla varianter av profil som fick sin föredragna variation. - profilegenskaper som härledsfrån Klaviyo AI
En lista över data som används av artificiell intelligens för att fastställa ett mönster bland profiler som föredrar en viss variation, dvs. vilka faktorer som sannolikt fick någon att föredra en variation framför en annan. Klicka på varje variation för att se den data som används eftersom den skiljer sig åt per variation.
Förståelse av vinstkonfidens och statistisk signifikans
Säg till exempel att du vill se om det påverkar din öppningsfrekvens med din E-postlista om du lägger till emojis i din ämnesrad. Om du bara skickar testet till 2 prenumeranter och emojis har en bättre öppningsfrekvens, kan du inte med säkerhet säga att resten av din E-postlista kommer att känna likadant. Om du istället testade med 100 personer i din E-postlista och fann att emojis har en väsentligt högre öppningsfrekvens, skulle du känna dig mycket mer säker på att det är bättre för din publik att använda emojis i din ämnesrad.
Under Win probability kan du se om den variation som visas är statistiskt signifikant eller inte. Om det anses vara betydande betyder det att variation har en hög vinstsannolikhet (dvs. 90% eller högre). Ett test kan också vara lovande, ofullständigt eller inte statistiskt signifikant. Läs mer om statistisk signifikans i Klaviyo.
Ytterligare resurser
- Bästa praxis för referens för A/B-testning
Lär dig bästa praxis för att använda Klaviyo's A/B-testning funktioner för att optimera din kommunikation med kund.
- Så här A/B-testar du ett registreringsformulär
Lär dig hur du använder A/B-testning för att utvärdera prestandan för olika delar av ditt registreringsformulär. Genom att analysera resultaten på ett effektivt sätt kan du se till att dina formulär når ut till besökarna och bidrar till listans tillväxt.
- Så här A/B-testar du en flödande e-post
Lär dig hur du använder Klaviyo:s A/B-testning för att testa enskilda e-postmeddelanden i en flöde, inklusive saker som ämnesrad, rabatter och e-postinnehåll etc. Du kan till och med använda A/B-tester för att avgöra om e-post i klartext fungerar bättre än bildtunga HTML-e-postmeddelanden.
- Så här A/B-testar du en e-postkampanj
Lär dig hur du ställer in och kör ett A/B-test för en kampanj, hur du läser testresultaten och några användningsfall för A/B-testning kampanjer. KlaviyoMed A/B-testning funktioner för kampanjer kan du enkelt testa olika ämnesrad, budskapsinnehåll och sändningstid så att du bättre förstår vad som fungerar bäst för din målgrupp.