Stručně: Inkrementalita je přírůstek výsledku způsobený konkrétním zásahem oproti tomu, co by pravděpodobně nastalo i bez něj.
Jak Inkrementalita používám v praxi
V praxi pojem Inkrementalita nepoužívám jako další číslo do prezentace. Nejdřív si určím, které rozhodnutí má zpřesnit, z jakých dat nebo pozorování vychází a kdo podle výsledku něco změní. Před kampaní definuji kontrolní a testovanou skupinu, primární metriku, dobu testu, možné přesahy a minimální prakticky významný efekt. Zapisuji také výchozí stav, datum měření a hranice interpretace. Díky tomu lze později rozlišit skutečný posun od změny nástroje, vzorku nebo formulace dotazu.
Na co si dát pozor
Největší riziko je přesnost, která je pouze na pohled. Atribuovaná konverze není automaticky inkrementální; zákazník mohl nakoupit i bez reklamy a platforma si jen připsala zásluhu. Výsledek proto porovnávám v čase, na stabilním vzorku a společně s obchodním kontextem. Pokud pojem nevede ke konkrétnímu dalšímu kroku, nevznikla analýza, ale jen nový štítek.
Otázky pro rozhodnutí
- Jaký je věrohodný protiklad bez zásahu?
- Lze zabránit přesahu mezi skupinami?
- Má test dostatečnou sílu a dobu?
- Je naměřený rozdíl ekonomicky významný?