ab-testning från a till Ö
DESCRIPTION
En snabb och enkel introduktion till AB-testning. Lär dig allt du behöver för att komma igång med ditt första egan AB-test. Vi går igenom: 1. Vad är A/B-testning? 2. Varför ska man testa? 3. Var ska man testa? 4. Vad ska man testa? 5. Hur testar man?TRANSCRIPT
A/B- testning från A till Ö
A solution looking for a problem
2
Har ni svaret på dom här frågorna är ni good to go!
1. Vad är A/B-testning?
2.Varför ska man testa?
3.Var ska man testa?
4.Vad ska man testa?
5.Hur testar man?
A/B-testning från A till Ö
3
Har du gjort det?
Vad är A/B-testning?
5
A/B- testning är en optimeringsmetod där man slumpvis styr besökare på sin vanliga sajt (eller mobilsajt/app mm.) till olika varianter av en sida eller sidkomponenter.
Man mäter beteendet för de olika segmenten och när experimentet gett ett statistiskt signifikant resultat på förändrat beteende och resultat kan man permanent implementera den vinnande varianten.
1.
2. Varför ska man testa?
6
Därför att man har en förbättringshypotes som man vill pröva.
För att man vill lära sig mer om besökarnas beteende så att man kan skapa nya hypoteser.
Vad är ett dåligt test?
7
Det enda dåliga testet är testet där man inte
lär sig någonting
CaseShapeuplub
Original
Lösning
A/B-test #1
+ 96 %
+ 21 %- 15 %+ 111 %+ 141 %
Engagement
Conversion Rate
Testresultat #1
Revenue+ 20 %
+ 12 %
WTF?!Man ska ju prioritera...
Image: goodui.org
A/B-test #2
+ 153 % + 96.17%
+ 26 % - 15.12%
+ 21.05%+ 32 %+ 121 % + 110.99%
+ 188 % + 140.77%
Engagement
Conversion Rate
Testresultat #2
Revenue+ 67 % + 19.56%
+ 51 % + 12.32%
Det beror på
Var ska man testa?
16
3.
What
Why
WhatInstead
Where
1. På ställen där besökare fattar avgörande beslut
3. Var ska man testa?
18
CaseNamnband
KonverteringarIntäkter
-6 %-13 %
A/B-test #1
KonverteringarIntäkter
-25 %-48 %
A/B-test #2
KonverteringarIntäkter
+16 %+15 %
Var ska vi börja?
Tips:“Begin with the end in mind”
Hur intresserade är vi på en skala?
24
Klicket Landningssidan Målet
Potential
Intresse
-57% !!!
Var droppar dom av?
1. På ställen där besökare fattar avgörande beslut
2. Sent i flöden
3. Var ska man testa?
26
3. Tidigt i flöden
4. Där man har mycket trafik
5. Där man har hög drop-off/exit rate
Computer Sweden
+ 1070%
Clickthroughs
1. På ställen där besökare fattar avgörande beslut
2. Sent i flöden
3. Tidigt i flöden
4. Där man har mycket trafik
5. Där man har hög drop-off/exit rate
6. Där det är enkelt att testa
3. Var ska man testa?
30
Det beror på
31
Vad ska man testa?4.
Ramverk för Konverteringsanalys
Förstår nya besökare tillräckligt intuitivt vad ni gör?
What’s in it for me?VARFÖR ska man ska använda just er sajt eller tjänst?
Kan man lita på er? Finns det andra som litat på er tidigare?
Ger er copy och grafiska design tillräcklig visuell prioritet åt era konverterings-element?
Förstår användaren vad den ska göra?Hjälper ni användaren när det går fel?
1. Copy
- Det är tekniskt okomplicerat
- Det har stor effekt
2. Ta bort
3. Olika landningssidor
4. Persuasion principles
- Knapphet
- Social proof
- Gradual engagement
5. Bilder
4. Vad ska man testa?
33
conversionista.se/sitevision
Den första fixeringen var på text i 70% av fallen
(i en eyetrackingstudie)
Vi ser fler och fler A/B-testnings-case som handlar om copy
Det är lätt att ändra
Varför prioritera copywriting?
34
Några ord - 30% högre konvertering
Copy-Centric Design
36
Rubrik som är läskigt bra!
37
Hur testar man? A/B-testning i 4 steg
38
In med enkelt javascript på sajten1
Skapa nya varianter (sidor eller komponenter)2
Besökare slumpas till de olika varianterna3
Mät resultatet4
Några alternativ
39
Några alternativ
40
Bytt innehåll i molnet
A/B-test
Multivariata tester
Lägg att testa “mallar”
Mycket funktionalitet
och rapporter
Kan bestämma testmål
“as you go”
Skapa nya sidor i CMS
A/B-test
Integrerat med Google
Analytics =
segmenterade rapporter
Testmål sätts vid start
Skapa nya sidor i CMS
En miljö som du är van
vid
Integrerat med
publiceringsprocessen
Case Kategorisida E-handel
Hur skapar vi hypoteser som når ända in i kaklet?
Matkassesida - Original
42
Kvinna
Småbarnsmamma
Försöker att “få allt att gå ihop”
Snabbhet, enkelhet, “bara få det överstökat” är viktigare
argument än pris, kvalitet.
Användaren
43
Matkasse = klar fem i, inte fem över
+ Färdiga recept + nyttig mat
+ spara tid- släpa kassar
= Färdig matkasse
Familjematkassen
Nyttig och hälsosam mat framtagen av Nutritionist
Lättlagad < 30 minuter
Barnvänlig – passar stora och små
690 kr/st
Beställ
Sommarkasse
Specialkasse för sommaren.ü Nyttig mat.ü Passar på grillen eller i ugnü Fräscha sommarråvaror
690 kr/st
BeställSe menyn
När kan vi leverera till dig? Postnummer Sök
44
Matkasse = klar fem i, inte fem över
+ Färdiga recept + nyttig mat
+ spara tid- släpa kassar
= Färdig matkasse
Familjematkassen
Nyttig och hälsosam mat framtagen av Nutritionist
Lättlagad < 30 minuter
Barnvänlig – passar stora och små
690 kr/st
Beställ
Sommarkasse
Specialkasse för sommaren.ü Nyttig mat.ü Passar på grillen eller i ugnü Fräscha sommarråvaror
690 kr/st
BeställSe menyn
45
Nästa leverans till ditt område i Sollentuna Välj kasse & hitta leveranstid som passar dig
Onsdag 13/11
46
47
Visa (med bild) användaren i situationen där produkten används
(Spegelneuroner)
Visa även tiden då produktene användss
Copy som adresserar användarens “mentala situation”
Visa bilder på mat (food, sex, danger)
Använd bilder av människor/ansikten/ögon på ett genomtänkt
sätt
Fokusera på interaktionselement som driver engagemang
Summering
49
50
Förståelse för den specifika
användnings-situationen
Förståelse för allmän psykologi
& påverkans-metoder
Solida Test-hypoteser
Resultat - 24% ökad försäljning
51
http://www.conversionista.se/mathem-sveriges-basta-matsajt-
en-liten-forklaring/
52
1. Man testar för att .........Testa - “Alibi testing”
2. Man lägger för lite kraft på att skapa bra hypoteser
3. Man kommer aldrig till skott
4. Man är för ivrig att spika resultatet
5. Man isolerar inte variationer och slutar på
plus-minus-noll
De 5 vanligaste testningsmisstagen
53
Mer konverteringstips på www.conversionista.se