Hoe zet ik een A/B test op?

Dit artikel biedt richtlijnen over hoe je een A/B-test kunt maken, ontwerpen en verzenden met Spotler MailPro. A/B-testen stelt je in staat om te bepalen welke versie van je e-mail het beste presteert, of het nu gaat om het testen van onderwerpregels, knopkleuren, inhoud of call-to-action.

In dit artikel leer je meer over:

Het maken van een A/B-testplan

Voordat je je A/B-test start, zijn er verschillende zaken waar je over na moet denken:

  • Wat wil je testen (onderwerpregel, knopkleur, e-mailinhoud, tekst in de knop, etc.)?
  • Hoeveel varianten wil je testen?
  • Wanneer moet de resterende batch uiterlijk verzonden worden?
  • Wat is de minimale grootte van de testgroep?
  • Hoe lang wil je minimaal testen?

Het ontwerpen van een A/B-test

Om je A/B-test te ontwerpen, ga naar Module Content > E-mails. Maak een e-mailbericht en kopieer dit om een testvariant te maken. Je kunt de onderwerpregel, headerafbeelding of call-to-action-knop bijvoorbeeld aanpassen.

AB copy.png

Het verzenden van een A/B-test

Om de A/B-test te verzenden, ga naar Module Versturen > Verstuur mailing. Hieronder worden alleen de extra velden vergeleken met een normale mailing weergegeven:

Belangrijk

De A/B-test mist de optie "test/definitief" in vergelijking met een normale mailing. Ondanks de naam "test", is dit altijd een definitieve verzending.

AB send.png

Naam van de A/B-test

Deze naam wordt alleen in MailPro gebruikt, als referentie zodat je deze later kunt vinden in de statistieken.

Mailing A/ Mailing B/ Mailing C/ Mailing D

Hier kun je 2 tot 4 mailings selecteren die je wilt vergelijken/testen. A en B zijn verplicht, terwijl C en D optioneel zijn.

AB send 2.png

Groepsgrootte

Na het selecteren van de mailings, gebruik je de schuifregelaar om de groepsgrootte voor de verzending aan te passen. Dit zal 2 (of maximaal 4) gelijke testgroepen creëren en de resterende groep ontvangt de winnaar. De groepsgrootte wordt weergegeven in percentages, en het daadwerkelijke aantal hangt af van de totale groepsgrootte voor de mailing.

Bepaal de winnaar

Je kunt de winnaar selecteren op basis van vier criteria:

  • Meeste (unieke) opens – Welke mailing (A/B/C/D) heeft de meeste unieke opens? Een unieke open betekent dat de e-mail werd bekeken (volledig of in de preview-weergave) en de afbeeldingen werden gedownload. Als afbeeldingen niet zichtbaar zijn, maar de gebruiker op een link klikt, wordt dit als een open tellen.
  • Meeste (unieke) e-mailrenders – Welke mailing (A/B/C/D) heeft de meeste unieke renders? Een unieke render betekent dat de e-mail werd bekeken (volledig of in de preview-weergave) en de afbeeldingen werden gedownload. Als de afbeeldingen niet werden gedownload, wordt het niet geteld.
  • Meeste (unieke) klikken – Welke mailing (A/B/C/D) heeft de meeste unieke klikken? Een unieke klik betekent het aantal verschillende mensen dat op een of meer links heeft geklikt.
  • Meeste (unieke) klikken op een specifieke link – Selecteer de link die je wilt testen. Welke mailing (A/B/C/D) had de meeste unieke klikken op deze specifieke link? Andere links en opens beïnvloeden de resultaten niet. Zorg ervoor dat de linktitels in beide mailings overeenkomen voor een goede vergelijking.
  • Meeste (unieke) conversies – Selecteer een conversiepunt. Dit kan alleen worden gebruikt als de conversiepixel is ingeschakeld. Deze maatregel volgt niet alleen de klikken, maar ook of de bezoeker de gewenste actie op de landingspagina heeft ondernomen.

Open rates en renders geven de effectiviteit van de onderwerpregel aan. Klikken geven inzicht in de inhoud van de e-mail, en conversies meten de actie die op de landingspagina is ondernomen.

Hoe lang wachten voordat de winnaar wordt verzonden

De A/B-test is een automatisch proces. Dit betekent dat je het eenmaal instelt en de mailing automatisch wordt verzonden. Eerst wordt de A/B (C/D) test verzonden naar een deel van de groep, en vervolgens ontvangt de resterende groep de winnende versie. De tijd die je moet wachten voordat de winnaar wordt verzonden, kan worden ingesteld tussen de 2 uur en 120 uur.

Bekijk de resultaten in de module Statistieken > A/B test.

Veelgestelde vragen

De mailing moet allemaal tegelijk verzonden worden, en er is geen tijd om te wachten op de resterende batch. Wat moet ik doen?

Als er geen tijd is voor de automatische A/B-test, kun je nog steeds meerdere varianten testen. Maak de mailings, split de groepen, en verstuur de e-mails één voor één naar de overeenkomstige groep. De resultaten kunnen in de statistieken worden gevonden en voor toekomstige mailings worden gebruikt.

Kan ik testen op basis van verschillende verzendtijden?

Ja, dat kan. Je kunt de automatische A/B-test in dit geval echter niet gebruiken. Deel de groep op in twee of groepen, meer en verstuur de mailings op verschillende tijden. De statistieken voor deze mailings kunnen worden gevonden en vergeleken in het statistiekenoverzicht.

Hoe bepaal ik wie de testmails ontvangt en wie de winnaar ontvangt?

Dit wordt automatisch en willekeurig gedaan met behulp van de optie "Groepsgrootte" in het verzendscherm van de A/B-test.

Veelvoorkomende tips

Zorg voor een grote testgroep om betrouwbare resultaten te krijgen.

Een kleine groepsgrootte kan leiden tot onnauwkeurige gegevens. Zorg ervoor dat er genoeg ontvangers zijn om valide resultaten te genereren.

Geef de test voldoende tijd om betekenisvolle gegevens te verzamelen.

De test te kort laten draaien kan leiden tot niet-conclusieve resultaten. Geef je test genoeg tijd om betekenisvolle gegevens te verzamelen.

Beslis niet de winnaar op basis van open rates wanneer de inboxvelden van de varianten exact hetzelfde zijn.

Als je alleen de inhoud van de e-mail verandert en de inboxvelden (onderwerpregel, afzendernaam, enz.) hetzelfde houdt, heeft dit geen invloed op de open rate. Om open rates effectief te testen, moeten de inboxvelden, zoals de onderwerpregel, verschillen terwijl de inhoud hetzelfde blijft.