Grok Bot og Brevo: kampanjeeksperimenter med målbare resultater

En hypotetisk testkampanje har 120 kvalifiserte kontakter og to foreslåtte emnelinjer. Utløseren er beslutningen før lansering. Flere klikk etter to ekstra dager er ingen seier.

Teamet vil vite om en praktisk emnelinje gir flere fullførte prøveaktiveringer enn en som vekker nysgjerrighet. Spørsmålet gjelder aktiveringer, ikke åpninger. xAIs Marketing Analyst-eksempel krever tall med kilder og like vinduer; bruk samme disiplin når Grok Bot lager testplanen. Vi har ikke kjørt denne Grok Bot-Brevo-forbindelsen i livekonto.

Frys spørsmål og målgruppe

Skriv én setning før kampanjen bygges: «Endrer emne B fullført aktivering innen sju dager fra registrert planlagt gruppestart blant kvalifiserte, påmeldte prøvekontakter sammenlignet med emne A?» Hold tekst, tilbud, URL og sendetid lik. Registrer ett planlagt starttidspunkt for hele gruppen. Definer aktiveringshendelsen i produktsystemet, kontaktens identitetsnøkkel og behandling av sene hendelser. Kan denne kilden ikke kobles til Brevo-mottakere, kan eksperimentet måle klikk, men ikke svare på aktiveringsspørsmålet.

Bruk gjeldende abonnements- og sperreposter, ikke CRM-medlemskap eller bedriftsdomene, til å definere kvalifisering. Fjern duplikater, avviste adresser, avmeldte, allerede aktiverte kontakter og personer i motstridende test. Frys de kvalifiserte ID-ene og fordel dem én gang med reproduserbar tilfeldig metode og eksperiment-ID. Lagre fordelingsloggen før sending. Sjekk samtykke og sperring rett før sending igjen. Registrer de som siden ble ukvalifiserte, som frafall uten e-post i opprinnelig gruppe; fordel dem aldri på nytt eller fjern dem stille fra hovedanalysen.

Den hypotetiske gruppen kan tildele 48 til A, 48 til B og 24 til en gruppe uten e-post. Dette er foreslåtte grupper, ikke resultater eller anbefaling om utvalgsstørrelse. Beregn nødvendig utvalg fra faktisk basisrate og nyttig effekt før lansering. En liten test kan bare vise at målingen virker. Guiden til A/B-testing hjelper med utvalget.

Post	Nødvendige felt	Deterministisk sjekk
Kvalifisering	Kontakt-ID, abonnementskilde, sperrestatus, frysetid	Alle tildelte kontakter var kvalifiserte da gruppen ble fryst
Fordeling	Eksperiment-ID, kontakt-ID, gruppe, fordelingstid	Én gruppe per kontakt; gruppen uten e-post får ingen testmail
Utfall	Hendelses-ID, kontakt-ID, hendelsestid, kilde	Første kvalifiserende aktivering per kontakt i samme sju-dagersvindu forankret i gruppestart for alle grupper

Sett opp sending med godkjenning

Brevos innebygde A/B-kampanje tester to emnelinjer eller innholdsversjoner på like store testutvalg, velger vinner etter åpninger eller klikk og sender den automatisk til resten. Dette passer bare når automatisk utrulling er godkjent før start. Den har ingen pause der et menneske kan undersøke første resultat.

For eksperimentet kobles de fryste gruppene til uttrykkelige Brevo-mottakerlister eller segmenter av en godkjent, verifisert operatør. Opprett to kampanjeutkast uten planlagt sending, ett for A og ett for B, med samme avsender, tekst, mål og planlagt vindu. Hold gruppen uten e-post utenfor begge. Sammenlign hver liste eller hvert segment mot loggen, sjekk sperringer på nytt og pass på at koblingen ikke utløser annen automatisering. Sammenlign faktiske mottakertall og forhåndsvisninger, og godkjenn så hver sending. Kan Brevo ikke bevise koblingen, stopp før sending. Startguiden til forbindelsen forklarer hvorfor en avgrenset MCP-server ikke begrenser tillatelser alene.

Fastsett klagegrense på forhånd, og stopp ventende sendinger hvis den overskrides. Behold tildeling og delvis levering; en stanset test er ingen seier for gruppen som ble sendt først. Vis avmeldinger og avvisninger sammen med hovedutfallet. Guiden om dobbel opt-in forklarer abonnementsgrensen.

Be om rapport og bestem neste eksperiment

Kopier denne prompten etter at du har gitt den fryste loggen og daterte rapporter:

Analyser bare eksperiment-ID-en og kildene jeg gir. Avstem kvalifiserte kontakter, tildeling til A/B/gruppe uten e-post, faktiske mottakere, levering, avvisninger, avmeldinger og klager per gruppe. Bruk den ene registrerte planlagte gruppestarten som dag null for A, B og gruppen uten e-post; mål samme sju-dagersvindu og del på opprinnelig tildelte kontakter i hver gruppe. Fjern gjentatte hendelses-ID-er, og tell deretter ulike kontakter med deres første kvalifiserende aktivering fra oppgitt produkthendelseskilde høyst én gang hver. Behold frafall uten e-post i tildelt gruppe, og merk rater bare blant leverte e-poster som sekundær diagnostikk. Skill manglende hendelser fra utilgjengelig kilde. Vis tellere, opprinnelig tildelte nevnere, frafall uten e-post, protokollavvik og rapportenes hentetidspunkter. Angi om planlagt utvalg og beslutningsregel ble oppfylt. Ikke utled salg fra klikk eller bruk åpninger som hovedutfall. Ikke fordel kontakter på nytt, erklær vinner for tidlig, opprett eller send kampanje eller endre kontakter. Foreslå ett neste eksperiment som utkast med hypotese og nødvendig godkjenning.

Sjekk: Sammenlign Brevos leverings- og klagetall med kampanjerapporten på samme hentetidspunkt. Dokumenter om filtrene for Apple Mail Privacy Protection og botaktivitet ble brukt; Brevo tar med slik aktivitet som standard. Guiden til e-postmålinger forklarer hvorfor åpninger kan villede. Rapporter testfasen og eventuell senere utrulling hver for seg.

Et gyldig resultat angir kvalifisert populasjon, tildeling, faktisk eksponering, utfallskilde, vindu og usikkerhet. Hvis beslutningsregelen fastsatt på forhånd ikke er oppfylt, noter «ikke avklart» og skriv neste testutkast. Mål ulike kontakter med aktivering innen sju dager per opprinnelig tildelt kontakt i A, B og gruppen uten e-post fra samme planlagte gruppestart. Vis levering, klager og frafall uten e-post separat. Rater bare blant leverte e-poster er sekundær diagnostikk fordi levering skjer etter tilfeldig fordeling. Uten gyldig tilfeldig fordeling eller utfallskilde er en forskjell beskrivende, ikke årsakssammenheng. Beslutningen må kunne gjenskapes fra loggen. Sammenlign den separate oppfølgingen av produktønsker.