A/B-tests

A/B-testen is een Pro-functie die twee onderwerpregels voor een campagne vergelijkt op een steekproef van je doelgroep en vervolgens de beste variant naar al de anderen stuurt. Dit haalt het gokwerk weg bij het bepalen van de onderwerpregel.

Hoe het werkt

1. Maak een campagne aan en schakel A/B-testen in.
2. Stel onderwerp A in (het onderwerp van de campagne) en onderwerp B (het alternatief om te testen).
3. Kies de verdeling: welk percentage van de doelgroep variant A ontvangt en welk percentage variant B ontvangt. De resterende contacten worden achtergehouden als de winnaarspoule.
4. Kies de winnende metriek: openingspercentage of klikpercentage.
5. Stel de wachttijd in (in uren) voordat er een winnaar wordt bepaald.
6. Kies de winnaarsmodus: automatisch (PrimoCRM stuurt de winnaar automatisch naar de achtergehouden poule) of handmatig (je bekijkt de resultaten en kiest zelf de winnaar).

PrimoCRM stuurt variant A en variant B naar hun respectievelijke delen van de doelgroep, wacht tot de evaluatieperiode voorbij is en stuurt vervolgens het winnende onderwerp naar de achtergehouden poule of wacht tot jij een keuze maakt, afhankelijk van de winnaarsmodus.

Een praktijkvoorbeeld

• Doelgroep: 10.000 contacten.
• Verdeling: 10 procent voor A en 10 procent voor B, dus elk 1.000 contacten. De overige 8.000 vormen de winnaarspoule.
• Metriek: openingspercentage. Wachttijd: 4 uur. Winnaarsmodus: automatisch.

Na 4 uur vergelijkt PrimoCRM de openingspercentages van de twee onderwerpen en stuurt het winnende onderwerp naar de resterende 8.000 contacten. Zo krijgt het sterkste onderwerp de meeste aandacht van je lijst zonder dat je dit handmatig hoeft te beslissen.

Tips

• Wijzig alleen de onderwerpregel tussen A en B, zodat je zeker weet dat het onderwerp het verschil heeft gemaakt.
• Zorg dat elke steekproef groot genoeg is om betekenisvol te zijn. Zeer kleine delen leveren wisselvallige resultaten op.
• Geef de wachttijd voldoende tijd, aangezien openingen nog uren na verzending binnenkomen.
• Gebruik het openingspercentage als de metriek voor onderwerpregeltests; dit is de meest directe meting van wat een onderwerpregel beïnvloedt.
• Pas wat je leert toe op je volgende campagne en je sjablonen.

De winnaarsevaluatie draait op dezelfde achtergrondmotor die de verzending regelt, dus dit gebeurt betrouwbaar zonder dat je een tabblad open hoeft te houden. Bekijk Rapporten om de resultaten achteraf te controleren.