Lyhyesti: Inkrementaalisuus on tietyn toimenpiteen aiheuttama lisätulos verrattuna siihen, mitä ilman toimenpidettä olisi todennäköisesti tapahtunut.
Miten käytän inkrementaalisuutta käytännössä
En käytä termiä uutena esityksen numerona. Määrittelen päätöksen, jota sen pitäisi selventää, sen taustalla olevan datan ja henkilön, joka muuttaa jotain tuloksen perusteella. Ennen kampanjaa määrittelen kontrolli- ja testiryhmät, päämittarin, testijakson, mahdollisen päällekkäisyyden ja pienimmän käytännössä merkityksellisen vaikutuksen. Kirjaan lähtötason, mittauspäivän ja tulkinnan rajat, jotta työkalun, otoksen tai kysymyksen sanamuodon myöhempiä muutoksia ei sekoiteta edistykseen.
Mitä kannattaa varoa
Suurin riski on täsmällisyys, joka vain näyttää todelliselta. Attribuoitu konversio ei automaattisesti ole inkrementaalinen: asiakas olisi voinut ostaa ilman mainosta, ja alusta vain otti kunnian tuloksesta. Vertaan tuloksia ajan kuluessa, vakaalla otoksella ja liiketoimintakontekstin kanssa. Jos termi ei johda konkreettiseen seuraavaan askeleeseen, analyysia ei syntynyt, vain uusi tunniste.
Päätöksiä koskevat kysymykset
- Mikä on uskottava vastatapahtuma ilman toimenpidettä?
- Voidaanko ryhmien välinen päällekkäisyys estää?
- Onko testillä riittävä tilastollinen voima ja kesto?
- Onko mitattu ero taloudellisesti merkityksellinen?