Denne guiden er for deg som faktisk har trafikk nok til å A/B-teste. Har du en liten nettside med noen hundre besøk i uka, les heller A/B-testing når du har lite trafikk – der går vi gjennom hva du gjør i stedet.
Her handler det om noe annet: hvorfor så mange A/B-tester ender uten svar, selv på sider med god trafikk. Svaret er nesten aldri verktøyet eller designet. Det er hypotesen. En svak hypotese gir en test som ikke kan lære deg noe, uansett hvor lenge den står.
Start med en hypotese du kan tape på
En god A/B-test begynner med en presis hypotese. Vi bruker dette formatet:
«Fordi vi ser [observasjon], tror vi at [endring] vil gi [resultat], målt ved [KPI].»
Formatet tvinger deg til å forankre testen i noe du faktisk har sett i dataene, ikke i magefølelsen til den som roper høyest i møtet.
Eksempel fra en tannklinikk: «Fordi opptakene viser at mobilbesøkende scroller forbi bestillingsknappen uten å se den, tror vi at en fast bestillingsknapp nederst på skjermen vil gi flere bestillinger, målt ved fullførte timebestillinger.»
Legg merke til at målet er bestillinger – ikke klikk. Klikk er lett å flytte. Kunder er det som betaler husleia.
Regn ut hvor lenge testen må stå – før du starter
Den vanligste feilen er å avslutte testen for tidlig. Du ser at variant B leder etter fire dager, blir glad og stopper. To uker senere er forskjellen borte.
Regn derfor ut utvalgsstørrelsen før du trykker start. En kalkulator for utvalgsstørrelse trenger tre ting:
- Dagens konverteringsrate på siden du tester
- Minste effekt du bryr deg om – hvor stor forbedring må det være for at endringen er verdt det?
- Hvor sikker du vil være – vanlig praksis er 95 % signifikansnivå og 80 % statistisk styrke
Resultatet forteller deg hvor mange besøkende hver variant trenger. Del det på trafikken din, og du vet hvor mange uker testen må stå. Er svaret et halvt år, er testen for liten for trafikken din – test en større endring, eller bruk metodene i guiden for små nettsider.
To tommelfingerregler i tillegg: la testen gå minst to hele uker, så du får med både travle og rolige dager. Og ikke stopp på en «god dag».
Hva du bør teste først
Prioriter etter hvor nært testen ligger pengene. Rekkefølgen som gir mest læring for de fleste:
- Verdiforslaget øverst på siden – forstår besøkende hva du selger og hvorfor de skal velge deg?
- Skjemaer – antall felt, rekkefølge og feilmeldinger
- CTA-er – tekst og plassering, ikke knappefarge
- Tillitssignaler – anmeldelser, garantier og kontaktinfo nær konverteringspunktet
- Sidestruktur – rekkefølgen på seksjonene
Usikker på hvor siden din lekker mest? Kjør den gjennom konverteringssjekken først. Den peker på de åpenbare friksjonspunktene, så du ikke bruker en test på noe du kunne fikset direkte.
Feilene som ødelegger testene
Flere tester på samme side samtidig. Tester du ny overskrift og nytt skjema på samme side samtidig, vet du ikke hva som ga effekten. Kjør dem etter hverandre, eller test dem som én samlet variant.
For små endringer på for lite trafikk. Knappefarge på en side med noen tusen besøk i måneden gir aldri et sikkert svar. Jo mindre trafikk, jo større må endringen være.
Feil KPI. En variant kan gi flere klikk og færre kunder. Mål det som teller: kjøp, bestillinger, henvendelser. Hva konverteringsrate betyr for akkurat din side, må være avklart før testen starter.
Ingen dokumentasjon. Skriv ned hypotese, varighet, resultat og hva du lærte. Etter et år har du en kunnskapsbank som gjør hver ny test smartere.
Verktøy etter at Google Optimize forsvant
Google Optimize ble lagt ned i 2023. Alternativene som brukes mest er VWO, AB Tasty og Convert. Alle har visuell editor, målretting og statistikkmotor. Velg det som passer budsjettet og teknologien på nettsiden din – prinsippene er de samme uansett verktøy.
Når testing blir en del av noe større
A/B-testing er ett verktøy i konverteringsoptimalisering, ikke hele faget. Analyse, brukerinnsikt og opprydding i det åpenbare kommer først. Lurer du på hva det koster å få hjelp til hele prosessen, har vi skrevet om hva CRO koster. Og vil du at noen tar hele jobben, kan du lese hvordan vi jobber med konverteringsoptimalisering.