W skrócie: Inkrementalność to dodatkowy wynik wywołany przez konkretną interwencję w porównaniu z tym, co prawdopodobnie wydarzyłoby się bez niej.
Jak wykorzystuję inkrementalność w praktyce
Nie używam tego terminu jako kolejnej liczby w prezentacji. Określam decyzję, którą ma doprecyzować, dane, na których się opiera, oraz osobę, która zmieni coś na podstawie wyniku. Przed kampanią definiuję grupę kontrolną i testową, główną miarę, okres testu, możliwe nakładanie się grup oraz minimalny efekt istotny w praktyce. Zapisuję punkt odniesienia, datę pomiaru i granice interpretacji, aby późniejszych zmian narzędzia, próby lub sformułowania pytania nie pomylić z postępem.
Na co uważać
Największym ryzykiem jest precyzja, która tylko wygląda na prawdziwą. Konwersja przypisana reklamie nie jest automatycznie inkrementalna — klient mógłby kupić bez reklamy, a platforma jedynie przypisała sobie zasługę. Porównuję wyniki w czasie, na stabilnej próbie i w kontekście biznesowym. Jeśli termin nie prowadzi do konkretnego kolejnego kroku, nie było analizy, tylko nowa etykieta.
Pytania pomocne przy podejmowaniu decyzji
- Jaki jest wiarygodny scenariusz alternatywny bez interwencji?
- Czy można zapobiec nakładaniu się grup?
- Czy test ma wystarczającą moc i czas trwania?
- Czy zmierzona różnica ma znaczenie ekonomiczne?