Eerst de beslissing, dan de variaties
"We willen betere creatieve content" is nog geen testvraag. Een betere vraag is: "Leidt een opening met een specifieke klantvraag tot meer relevante aanvragen dan een opening die direct de applicatie toont?" Nu is duidelijk wat er moet veranderen en welke volgende productiestap afhangt van het resultaat.
Een hypothese verbindt de doelgroep, het vermoedde obstakel en de variant. Bijvoorbeeld: "Potentiële klanten begrijpen nog niet hoe ze ons aanbod moeten gebruiken. Een zichtbare applicatie zou hen kunnen helpen dit te begrijpen." Dit is een plausibele aanname, geen bewezen psychologisch effect.
Controleer vóór het testen ook het aanbod en de vervolgpagina. Als het formulier niet werkt of de service onduidelijk blijft, zal een andere opening deze problemen niet oplossen. Creativiteit, doelgroep en landingspagina moeten samen worden bekeken, zonder dat alles tegelijkertijd wordt aangepast voor elke vergelijking.
Wat kan er verschillen tussen twee variaties?
Voor een duidelijk gedefinieerde vraag moeten de andere relevante voorwaarden zo consistent mogelijk blijven. Je kunt bijvoorbeeld twee benaderingen vergelijken met dezelfde hoofdinhoud, aanbieding en vervolgstap. Als de presentator, prijs, doelgroep en landingspagina tegelijkertijd veranderen, weet je later niet meer welk verschil de oorzaak was.
Het vergelijken van complete concepten is nog steeds mogelijk. De formulering moet echter zijn: "Concept één versus concept twee onder deze omstandigheden", en niet: "Deze ene zin werkt beter." Dit onderscheid bepaalt wat de productie van het resultaat kan leren.
Geconstrueerde variantmatrix voor een adviesbureau:
| Component | Variant met klantvraag | Variant met toepassing |
|---|---|---|
| Ingangspunt | Een echte, terugkerende vraag uit een adviesgesprek. | Een specifieke situatie waarin advies nodig is. |
| Hoofdgedeelte | Hetzelfde professioneel beoordeelde proces. | Hetzelfde professioneel beoordeelde proces. |
| Bewijs | Hetzelfde goedgekeurde voorbeeld. | Hetzelfde goedgekeurde voorbeeld. |
| Volgende stap | Dezelfde beschrijving van het eerste consult. | Dezelfde beschrijving van het eerste consult. |
| Doel en vervolgactie | Identieke doelpagina en criteria voor het matchen van zoekopdrachten. | Identieke doelpagina en criteria voor het matchen van zoekopdrachten. |
De matrix is een planningsvoorbeeld zonder resultaatgegevens. Videoproductie Het laat zien welke extra stappen daadwerkelijk nodig zijn. Het is geen uitnodiging om willekeurige variaties uit elk detail te schrappen.
A/B-test of vergelijking bij normale advertentie-uitvoering?
In een gecontroleerde A/B-test worden de variaties vergeleken met behulp van een geschikte toewijzing. De TikTok-documentatie over A/B-testen beschrijft afzonderlijke, even grote doelgroepen zonder overlap. Je kunt de specifieke beschikbaarheid en configuratie controleren in het betreffende advertentieaccount.
Als je meerdere advertenties in een automatisch geoptimaliseerde campagne uitvoert, kan het platform deze anders weergeven. Verschillen in het aantal bereikte personen, de timing of het aantal impressies kunnen de vergelijking beïnvloeden. Dergelijke observaties zijn nuttig voor verdere planning, maar mogen niet zonder nader onderzoek als experimenteel bewijs worden beschouwd.
Zelfs twee organische berichten vormen meestal geen zuivere A/B-test. Ze kunnen verschillende mensen op verschillende tijdstippen bereiken. Gebruik ze als aanknopingspunten voor nieuwe vragen, in plaats van een algemene regel af te leiden uit één succesvolle post.
Welke key performance indicator (KPI) is doorslaggevend?
Kies een belangrijke meetwaarde die aansluit bij je beslissing. Bijvoorbeeld, in een campagne voor aanvragen kan de inspanning per gekwalificeerde aanvraag relevant zijn. Definieer vooraf wat "gekwalificeerd" betekent: Komt de aanvraag overeen met je aanbod, wordt aan de essentiële voorwaarden voldaan en is de contactpersoon bereikbaar?
| Observatie | Helpt bij deze vraag | Nog niet beantwoord |
|---|---|---|
| Videoweergaven en afspeeltijd | Wordt de content überhaupt bekeken? | Of er geschikte klanten door worden gegenereerd. |
| Klikken op de volgende stap | Wekt de advertentie interesse om lid te worden? | Of de verwachtingen op de landingspagina worden waargemaakt. |
| Aanvragen | Is er contact gelegd? | Of de contacten relevant zijn voor het aanbod. |
| Gekwalificeerde aanvragen | Ontvang je aanvragen die relevant zijn voor je vakgebied? | Of aanbiedingen worden geaccepteerd. |
| Bestellingen en economische bijdrage | Hoe ontwikkelt het bedrijf zich? | Welke bijdrage heeft één video geleverd? |
Een video met een lage click-through rate kan veel onterechte verwachtingen wekken. Een andere aanpak zou minder leads kunnen genereren, maar wel relevantere aanvragen. Daarom moet feedback van de verkoopafdeling in de analyse worden meegenomen. De basisprincipes van de kostenmetriek vind je in het artikel over Kosten per lead.
Hoe lang moet een creatieve test lopen?
Er is geen betrouwbare minimale duur of vast aantal aankopen dat elke test robuust maakt. De planning hangt af van factoren zoals het initiële niveau, het economisch relevante verschil, het verwachte datavolume en de gebruikte testmethodologie.
Bepaal vóór aanvang wanneer de evaluatie plaatsvindt en onder welke voorwaarden je stopt. Bij een goed geplande test moet je niet elke dag op zoek gaan naar een winnaar en stoppen bij het eerste geschikte tussentijdse resultaat. Technische fouten of onaanvaardbare zakelijke gevolgen kunnen nog steeds een reden zijn om de test te beëindigen.
Met slechts enkele aanvragen zijn de resultaten vaak onzeker. "Nog geen significant verschil" is een mogelijk resultaat. Dit is geen bewijs van gelijkwaardigheid en ook geen oproep om een onbeperkt budget toe te wijzen. Een kleiner aantal opties of een andere testvraag zou wellicht geschikter zijn.
Een rekenvoorbeeld – en waarom het geen winnaar blijkt te zijn
Stel dat in een hypothetische vergelijking €500 aan elke optie wordt besteed. De eerste optie genereert tien aanvragen, waarvan er twee voldoen aan je criteria. De tweede optie genereert zes aanvragen, waarvan er drie voldoen.
De kosten per aanvraag bedragen €50, oftewel ongeveer €83. De kosten per gekwalificeerde aanvraag bedragen daarentegen €250, oftewel ongeveer €167. De beslissing zal afhangen van de belangrijkste prestatie-indicator (KPI).
Deze kleine steekproeven tonen geen betrouwbaar voordeel aan. Verschillende leveringsmethoden, willekeurige schommelingen of inconsistente kwalificatie kunnen de indruk beïnvloeden. Dit voorbeeld illustreert slechts waarom het cruciaal is om de doelmetriek te definiëren voordat je begint. Het is geen klantresultaat en geen budgetaanbeveling.
Wat er na de test weer in productie gaat
Documenteer de testvraag, varianten, tijdsperiode, gegevensbron en bekende beperkingen. Leg vast welke beslissing je op basis hiervan neemt: overnemen, afwijzen of doorgaan met een preciezere vraag. Als er geen duidelijk verschil is, kan een eenvoudigere of goedkopere variant nog steeds haalbaar zijn – alleen niet als bewezen winnaar qua prestaties.
Bovendien duiden dalende resultaten niet automatisch op creatieve vermoeidheid. Controleer ook de levering, het aanbod, het seizoen, de meting en het traject na de klik. Een nieuwe video die op basis van een vermoeden is gemaakt, kan het verkeerde probleem aanpakken.
Bij Vertikal Viral combineren we levering en optimalisatie met de volgende productie. Neem bestaande advertenties, je doelstellingen en eventuele feedback van eerdere onderzoeken mee. Op basis hiervan kunnen we een concrete volgende test opstellen. Laten we GROOT denken.
Het verschil tussen creatieve testen, creatieve prestatietesten en vermoeidheidstesten
Creatieve testen zijn de methoden die je gebruikt om aannames te vergelijken. Performance creative verwijst naar reclamemateriaal dat is afgestemd op een campagnedoelstelling. Creatieve vermoeidheid beschrijft een mogelijke afname van de effectiviteit in de loop van de tijd. De termen zijn verwant, maar niet uitwisselbaar.
Dit helpt bij het ontwikkelen van een nieuw advertentiemedium. Performance Creative BriefingAls een eerder effectieve advertentie minder effectief wordt, begin dan met de vermoeidheidsdiagnosevoordat je overhaast een nieuwe test als oplossing overweegt.