Ontdek welke e-mailtemplate beter werkt voor je klanten. Met een A/B-test vergelijk je een controletemplate met een of meer testtemplates in dezelfde campagne. Je kiest zelf de verdeling en beslist op basis van de resultaten welke template je houdt.
Wat verandert er door een A/B-test?
Een A/B-test bepaalt welke template een mail van de campagne gebruikt. De trigger, de producten, het klanttype en de andere instellingen blijven gelden. Een bestelling krijgt niet alle varianten.
De controletemplate is je bestaande mail. Een testtemplate heeft bijvoorbeeld een ander onderwerp, een kortere tekst of een andere knop. Verander bij voorkeur één ding tegelijk. Dan kun je verschillen beter verklaren.
Een A/B-test instellen
Open de campagne en ga naar het tabblad Instellingen. Staat de campagne aan? Klik dan op Pauzeren en bewerken.
Klik in de kaart Inhoud op A/B-test instellen. Of klik op het tabblad A/B-test op A/B-test instellen.
Heeft de campagne ook een Franse template? Kies dan bovenaan Nederlands of Frans.
Zet de schakelaar A/B-test aan.
Klik op Testtemplate toevoegen en kies een template. Herhaal dit voor meer varianten. Dezelfde template kun je binnen één taal maar één keer kiezen.
Stel bij Hoeveel ontvangers doen mee aan de test? het testpercentage in. Je ziet direct hoeveel de controle houdt. Bij 10% test houdt de controle 90%.
Heb je meer varianten? Open dan Percentages handmatig instellen om de percentages per variant te kiezen, of klik op Gelijk verdelen. De percentages van de varianten moeten samen het testpercentage zijn.
Klik onderaan op Opslaan, blijft gepauzeerd of Opslaan en weer activeren.
De campagne moet aanstaan om mails te versturen. Alleen de A/B-test aanzetten zet de campagne niet aan.
Voorbeeld: je stelt 20% test in en verdeelt dit gelijk over twee testtemplates. De controle krijgt 80% van de mails, testtemplate A 10% en testtemplate B 10%. Bij weinig mails komt de verdeling niet precies op deze percentages uit.
Maak een aparte template voor je wijziging
Dupliceer een template voordat je hem voor een test aanpast. Een template die meer campagnes of varianten gebruiken, verandert overal waar hij gekoppeld is. Geef de kopie een herkenbare naam, bijvoorbeeld met de wijziging erin. Lees: Templates en campagnes: bewerken en dupliceren.
Nederlands en Frans apart testen
Elke taal heeft een eigen controletemplate, testtemplates en verdeling. Je kunt dus Nederlands testen terwijl Frans alleen de gewone Franse template gebruikt.
Wil je alleen de Franse test stoppen? Kies in het A/B-blok Frans, zet de schakelaar A/B-test uit en laat de Franse template staan. Franse mails gebruiken dan de Franse controletemplate en de Nederlandse test gaat door. Lees: Franstalige e-mails versturen.
Resultaten bekijken
Op de campagnepagina, tabblad A/B-test, zie je:
de cijfers sinds de start van de test;
per versie het aantal afgeleverde mails, het openpercentage, het klikpercentage en het aandeel kliks op de reviewknop;
Hoogste kliks tot nu bij de versie met het hoogste klikpercentage;
Kliks per dag, per versie.
Op het tabblad A/B-testen van E-mailcampagnes zie je alle campagnes met een A/B-test. Kies bovenaan de periode en vergelijk binnen dezelfde taal:
Ingestelde verdeling: het ingestelde aandeel van elke variant. Dit is niet de gemeten verdeling.
Afgeleverd: het aantal afgeleverde mails per variant.
Openpercentage: het aandeel afgeleverde mails met een opening.
Klikpercentage: het aandeel afgeleverde mails met een klik.
Hoogste open rate tot nu: per taal de variant met het hoogste openpercentage, als minstens twee varianten elk 30 of meer afgeleverde mails hebben.
Oudere mails zonder variant staan apart als Niet toegewezen (vóór A/B-test). Trek geen conclusie uit één opening of klik. Verschillende aantallen mails, de gekozen periode en de grenzen van het meten van e-mail beïnvloeden de vergelijking.
De labels zijn een indicatie, geen bewijs. MarktMentor zet niet zelf alle mails op een andere template. Je kiest zelf de controletemplate. Lees: Statistieken van e-mailcampagnes bekijken.
Een variant wijzigen of de test stoppen
Pauzeer eerst de campagne. Op het tabblad A/B-test staan dan de knoppen:
Variant wijzigen: opent de A/B-test in de kaart Inhoud.
Test stoppen: zet de A/B-test uit en opent de kaart Inhoud. Klik daarna onderaan op opslaan.
Je kunt de test ook stoppen door in het A/B-blok de schakelaar A/B-test uit te zetten.
Na het stoppen gebruiken nieuwe mails van die taal de controletemplate. De verdeling, de varianten en de eerdere resultaten blijven bewaard. Zet je de test later weer aan, dan gaat dezelfde test verder. De cijfers beginnen niet opnieuw bij nul.
Een gestopte test kan dus nog een ingestelde verdeling van bijvoorbeeld 90/10 tonen. Dat is de bewaarde instelling, niet de verdeling tijdens de pauze. De campagnestatus staat hier los van: een gepauzeerde campagne verstuurt geen mails.
Testmail of A/B-test?
Met Testmail sturen controleer je de inhoud en opmaak van één template. Een testmail voert geen A/B-verdeling uit en telt niet mee in de cijfers. Test elke template vooraf en vergelijk daarna de cijfers van de echte mails.
Lees ook: Een e-mailtemplate testen.