Incrementality-Testing (Holdout-Tests)
Incrementality-Testing ist eine kausale Messmethode, die den tatsächlichen inkrementellen Effekt einer Marketingmaßnahme ermittelt, indem eine Test-Gruppe (z. B. Region, Nutzersegment) der Werbung ausgesetzt wird, während eine vergleichbare Kontroll- bzw. Holdout-Gruppe unbeworben bleibt. Die häufigste Form ist der Geo-Holdout-Test, bei dem geografische Regionen in Test- und Kontrollmärkte aufgeteilt werden, um den Umsatzunterschied statistisch zuzuordnen. Anders als Attributionsmodelle, die Klickpfade auf Nutzerebene rekonstruieren, misst Incrementality-Testing aggregiert und unabhängig von Cookies oder Tracking-Signalverlust.
In der Praxis
Für Agenturen ist Incrementality-Testing das Mittel der Wahl, wenn Kund:innen an der Aussagekraft von Klick-Attribution zweifeln (z. B. nach iOS-Tracking-Einschränkungen) oder groß angelegte Kampagnen (TV, Social, Programmatic) auf echten Umsatzeffekt prüfen wollen. Ein typischer Geo-Test läuft als Faustregel 4–8 Wochen, benötigt sauber vergleichbare Test- und Kontrollregionen und liefert Kennzahlen wie inkrementeller ROAS (iROAS); die tatsächlich nötige Laufzeit ergibt sich aus der angestrebten Mindesteffektgröße, der Streuung der Umsätze und der Zahl vergleichbarer Märkte. Im Unterschied zu A/B-Tests, die einzelne Seitenvarianten auf Nutzerebene vergleichen, testet Incrementality-Testing ganze Kanäle oder Kampagnen auf Marktebene. Plattform-eigene Holdout-Tests (z. B. Meta Conversion Lift, Google Ads Geo Experiments) senken den Einrichtungsaufwand; Google Ads Conversion Lift ist allerdings nicht für alle Konten verfügbar und wird nur über die Google-Ansprechpartner:innen freigeschaltet – für KMU ohne Account-Betreuung also kein niedrigschwelliger Einstieg. Für belastbare Cross-Channel-Aussagen empfehlen sich spezialisierte Tools wie GeoLift. Ergebnisse sollten mit Attributionsdaten und MMM abgeglichen werden statt isoliert interpretiert zu werden.