Op deze pagina
Een hypothetische proefcampagne heeft 120 gerechtigde contacten en twee voorgestelde onderwerpregels. De trigger is de beslissing vóór de start. Extra klikken na twee extra dagen zijn geen overwinning.
Het team wil weten of een praktische onderwerpregel meer voltooide proefactiveringen oplevert dan een nieuwsgierig makende. De vraag gaat over activeringen, niet openingen. xAI’s Marketing Analyst-voorbeeld eist cijfers met bron en gelijke tijdvensters; gebruik dezelfde nauwkeurigheid als Grok Bot een testplan opstelt. We hebben deze Grok Bot-Brevo-verbinding niet in een live account uitgevoerd.
Leg vraag en doelgroep vast
Schrijf vóór het maken van de campagne één zin: ‘Verandert onderwerp B onder gerechtigde, ingeschreven proefcontacten het aantal voltooide activeringen binnen zeven dagen na de vastgelegde geplande cohortstart ten opzichte van onderwerp A?’ Houd tekst, aanbod, URL en verzendtijd gelijk. Leg één gepland starttijdstip voor het hele cohort vast. Definieer het activeringsevenement in het productsysteem, de contactidentiteitssleutel en de omgang met late evenementen. Kan die bron niet aan Brevo-ontvangers worden gekoppeld, dan kan het experiment klikken meten maar de activeringsvraag niet beantwoorden.
Gebruik actuele abonnements- en blokkeringsrecords, geen CRM-lidmaatschap of bedrijfsdomein, om geschiktheid te bepalen. Verwijder duplicaten, bounces, afmeldingen, al geactiveerde contacten en mensen in een conflicterende test. Zet de gerechtigde ID’s vast en deel ze één keer in met een reproduceerbare toevalsmethode en experiment-ID. Sla het indelingsregister op vóór verzending. Controleer toestemming en blokkering vlak vóór verzending opnieuw. Registreer wie intussen niet meer gerechtigd is als niet-verzonden uitval in de oorspronkelijke groep; deel die nooit opnieuw in en verwijder die niet stilletjes uit de hoofdanalyse.
Die hypothetische groep kan 48 aan A, 48 aan B en 24 aan een niet-aangeschreven controlegroep toewijzen. Dat zijn voorgestelde groepen, geen resultaten of steekproefadvies. Bereken vóór de start de benodigde steekproef op basis van je werkelijke uitgangspercentage en nuttige effect. Een kleine test bewijst mogelijk alleen dat de meting werkt. De A/B-testgids helpt bij de planning.
| Record | Benodigde velden | Deterministische controle |
|---|---|---|
| Geschiktheid | Contact-ID, abonnementsbron, blokkeringsstatus, vastzettijd | Elk ingedeeld contact was gerechtigd bij het vastzetten |
| Indeling | Experiment-ID, contact-ID, groep, indelingstijd | Eén groep per contact; controlegroep krijgt geen testmail |
| Uitkomst | Evenement-ID, contact-ID, evenementtijd, bron | Eerste geldige activering per contact in hetzelfde aan de cohortstart gekoppelde zevendaagse venster voor alle groepen |
Stel een verzending met controlemoment in
Brevo’s ingebouwde A/B-campagne test twee onderwerpen of inhoudsversies met even grote testgroepen, kiest een winnaar op basis van openingen of klikken en verstuurt die daarna automatisch naar de rest. Dat is alleen geschikt als die automatische uitrol vóór de start is goedgekeurd. Er is geen pauze om het eerste resultaat door een mens te laten beoordelen.
Koppel voor dit experiment de vastgezette groepen aan expliciete Brevo-ontvangerslijsten of segmenten via een goedgekeurde, gecontroleerde uitvoerder. Maak twee ongeplande campagneconcepten, één voor A en één voor B, met dezelfde afzender, tekst, bestemming en gepland venster. Houd de controlegroep uit beide. Vergelijk elke lijst of elk segment met het register, controleer blokkeringen opnieuw en zorg dat de koppeling geen andere automatisering activeert. Vergelijk werkelijke aantallen ontvangers en voorbeelden en keur dan elke verzending goed. Kan Brevo de koppeling niet bewijzen, stop dan vóór verzending. De startgids voor de verbinding legt uit waarom een beperkte MCP-server rechten niet zelf begrenst.
Leg vooraf een klachtengrens vast en stop openstaande verzendingen als die wordt overschreden. Bewaar de indeling en eventuele gedeeltelijke bezorging; een gestopte test is geen overwinning voor de groep die toevallig eerst verzond. Houd afmeld- en bounceaantallen naast de hoofduitkomst. Onze gids voor dubbele opt-in behandelt de abonnementsgrens.
Vraag een rapport op en bepaal het volgende experiment
Kopieer deze prompt na het verstrekken van het vastgezette register en gedateerde rapporten:
Analyseer alleen de experiment-ID en bronnen die ik geef. Vergelijk gerechtigde contacten, A/B/controlegroepindeling, werkelijke ontvangers, bezorging, bounces, afmeldingen en klachten per groep. Gebruik het ene vastgelegde geplande cohortbegin als dag nul voor A, B en controlegroep; meet hetzelfde zevendaagse venster en deel door oorspronkelijk ingedeelde contacten in elke groep. Verwijder herhaalde evenement-ID’s en tel daarna per verschillend contact diens eerste geldige activering uit de genoemde productevenementbron maximaal één keer. Houd niet-verzonden uitval in de ingedeelde groep en label percentages alleen onder bezorgde mails als secundaire diagnose. Onderscheid ontbrekende evenementen van een niet-beschikbare bron. Toon tellers, oorspronkelijk ingedeelde noemers, niet-verzonden uitval, protocolafwijkingen en ophaaltijden van rapporten. Zeg of de geplande steekproef en beslisregel zijn gehaald. Leid geen verkoop af uit klikken en gebruik openingen niet als hoofduitkomst. Deel contacten niet opnieuw in, wijs niet voortijdig een winnaar aan, maak of verstuur geen campagne en wijzig geen contact. Stel als concept één volgend experiment voor, met hypothese en vereiste goedkeuring.
Controle: vergelijk Brevo’s bezorg- en klachtentotalen met het campagnerapport op hetzelfde ophaaltijdstip. Documenteer of de filters voor Apple Mail Privacy Protection en botactiviteit zijn toegepast; Brevo neemt die activiteit standaard mee. De gids over e-mailstatistieken legt uit waarom openingen kunnen misleiden. Rapporteer de testfase en latere uitrol afzonderlijk.
Een geldig resultaat noemt gerechtigde populatie, indeling, werkelijke blootstelling, uitkomstbron, venster en onzekerheid. Wordt de vooraf vastgelegde beslisregel niet gehaald, noteer dan ‘niet doorslaggevend’ en schrijf een volgend testplan. Meet verschillende contacten met activering binnen zeven dagen per oorspronkelijk ingedeeld contact in A, B en controlegroep vanaf hetzelfde geplande cohortbegin. Toon bezorging, klachten en niet-verzonden uitval apart. Percentages alleen onder bezorgde mails zijn secundaire diagnoses, omdat bezorging na de willekeurige indeling plaatsvindt. Zonder geldige willekeurige indeling of uitkomstbron is een verschil beschrijvend, niet causaal. De beslissing moet reproduceerbaar zijn uit het register. Vergelijk het aparte proces voor opvolging van productfeedback.
Veelgestelde vragen
Kan Grok Bot een Brevo-campagne op basis van klikken tot winnaar verklaren?
Alleen als klikken vooraf als uitkomst zijn gekozen en de vaste vergelijking voldoende bewijs heeft. Klikken bewijzen geen verkoop. Voor een verkoopvraag heb je gekoppelde bestelgegevens met expliciete toeschrijving en observatievenster nodig; meld anders dat verkoopgegevens ontbreken.
Wacht Brevo's ingebouwde A/B-test op mijn controle voor de winnende variant naar de rest gaat?
Nee. Brevo verstuurt de gekozen variant automatisch naar de rest na de testperiode. Gebruik dit alleen als varianten, maatstaf en uitrol vooraf zijn goedgekeurd. Voor menselijke controle gebruik je afzonderlijk goedgekeurde en gecontroleerde ontvangerslijsten of segmenten en campagnes.
Wat als klachten toenemen tijdens de test?
Pas de veiligheidsgrens toe die je vóór de start vastlegde, stop openstaande verzendingen en bewaar indelings- en bezorggegevens. Onderzoek de klachtbron. Kies niet stilletjes een winnaar en deel na de stop geen contacten opnieuw in.