Lyhyesti: A/B/C-testissä verrataan kolmea yhden kokemuksen versiota samanaikaisesti jaetun yleisön kesken. Tarkoituksena on testata etukäteen kuvattua hypoteesia, ei kokeilla satunnaisesti mahdollisimman monia muutoksia.
Miten käytän A/B/C-testausta käytännössä
Kolmen version kontrolloitu vertailu, jonka avulla selvitetään, mikä niistä toimii paremmin määritellylle yleisölle ja tavoitteelle.
Mihin kannattaa kiinnittää huomiota
Käytän A/B/C-testausta tietyn päätöksen tukena, en leimana tai itsenäisenä mittarina. Aloitan määrittelemällä yleisön, tilanteen ja tuloksen, jonka täytyy muuttua. Selvitän sitten, mitä näyttöä on saatavilla, kuka toimii havainnon perusteella ja mikä käytännön seuraava askel pitäisi ottaa. Kirjaan lähtötilanteen, mittauspäivän ja tulkinnan rajat, jotta todellinen parannus voidaan myöhemmin erottaa työkalujen, otannan, toteutuksen tai kyselyn sanamuodon muutoksista. Näin työ pysyy yhteydessä asiakaspolkuun ja kaupalliseen kontekstiin sen sijaan, että siitä tulisi esityksen numero.
Päätöstä ohjaavat kysymykset
- Minkä tietyn päätöksen tätä pitäisi selkeyttää?
- Mikä näyttö tukee johtopäätöstä, ja mikä on vielä hypoteesi?
- Mitä teemme tämän seurauksena toisin?
- Kuka vastaa muutoksesta ja milloin arvioimme sen vaikutusta?