Grok Bot og Brevo: kampagneeksperimenter med målbare resultater

En hypotetisk testkampagne har 120 berettigede kontakter og to foreslåede emnelinjer. Udløseren er beslutningen før lancering. Flere klik efter to ekstra dage er ingen sejr.

Holdet vil vide, om en praktisk emnelinje giver flere fuldførte prøveaktiveringer end en nysgerrighedsskabende. Spørgsmålet handler om aktiveringer, ikke åbninger. xAI’s Marketing Analyst-eksempel kræver kildebelagte tal og ens tidsvinduer; brug samme disciplin, når Grok Bot skriver testplanen. Vi har ikke kørt forbindelsen Grok Bot-Brevo i en livekonto.

Frys spørgsmål og kontakter

Skriv én sætning før kampagnen bygges: »Ændrer emne B fuldført aktivering inden for syv dage fra den registrerede planlagte gruppestart blandt berettigede, tilmeldte prøvekontakter sammenlignet med emne A?« Hold brødtekst, tilbud, URL og sendetid fast. Registrer ét planlagt starttidspunkt for hele gruppen. Definer aktiveringshændelsen i produktsystemet, kontaktens identitetsnøgle og hvordan forsinkede hændelser håndteres. Kan kilden ikke kobles til Brevo-modtagere, kan forsøget måle klik, men ikke besvare aktiveringsspørgsmålet.

Brug aktuelle tilmeldings- og spærringsposter, ikke CRM-medlemskab eller firmadomæne, til at definere berettigelse. Fjern dubletter, afviste mails, afmeldte, allerede aktiverede kontakter og personer i en konfliktende test. Frys de berettigede id’er og fordel dem én gang med en reproducerbar tilfældig metode og eksperiment-id. Gem fordelingsloggen før enhver afsendelse. Tjek samtykke og spærring igen lige før afsendelse. Registrer personer, der siden er blevet uberettigede, som frafald uden mail i deres oprindelige gruppe; fordel dem aldrig igen eller fjern dem stiltiende fra hovedanalysen.

Den hypotetiske gruppe kunne fordele 48 til A, 48 til B og 24 til en gruppe uden mail. Det er foreslåede grupper, ikke resultater eller anbefalet stikprøvestørrelse. Beregn før start den nødvendige størrelse ud fra din faktiske basisrate og en nyttig effekt. En lille test kan kun vise, at målingen virker. Guiden til A/B-test hjælper med stikprøven.

Post	Nødvendige felter	Deterministisk kontrol
Berettigelse	Kontakt-id, tilmeldingskilde, spærringsstatus, frysetidspunkt	Hver tildelt kontakt var berettiget ved frysning
Fordeling	Eksperiment-id, kontakt-id, gruppe, fordelingstid	Én gruppe pr. kontakt; gruppen uden mail får ingen testmail
Resultat	Hændelses-id, kontakt-id, hændelsestid, kilde	Første kvalificerende aktivering pr. kontakt i det samme syvdagesvindue forankret i gruppestart for alle grupper

Opsæt afsendelse med et godkendelsestrin

Brevos indbyggede A/B-kampagne tester to emnelinjer eller indholdsvarianter på lige store testudsnit, vælger vinder efter åbninger eller klik og sender den så automatisk til resten. Det er kun egnet, når automatisk udrulning er godkendt før start. Der er ingen pause, hvor en person kan se det første resultat.

Knyt til dette eksperiment de frosne grupper til udtrykkelige Brevo-modtagerlister eller segmenter via en godkendt og verificeret operatør. Opret to kampagneudkast uden planlagt afsendelse, ét til A og ét til B, med samme afsender, brødtekst, destination og planlagte vindue. Hold gruppen uden mail ude af begge. Sammenhold hver liste eller hvert segment med loggen, tjek spærring igen, og sørg for, at kortlægningen ikke udløser anden automatisering. Sammenlign faktiske modtagerantal og forhåndsvisninger, og godkend derefter hver afsendelse. Kan Brevo ikke bevise kortlægningen, så stop før afsendelse. Startguiden til forbindelsen forklarer, hvorfor en afgrænset MCP-server ikke i sig selv begrænser tilladelser.

Fastlæg en klagegrænse på forhånd, og stop afventende mails, hvis den overskrides. Bevar fordeling og delvis levering; en stoppet test er ikke sejr til den gruppe, der kom først af sted. Vis afmeldinger og afvisninger sammen med hovedresultatet. Guiden til dobbelt opt-in forklarer tilmeldingsgrænsen.

Bed om en rapport, og vælg næste eksperiment

Kopiér denne prompt efter at have givet den frosne log og daterede rapporter:

Analyser kun det eksperiment-id og de kilder, jeg giver. Afstem berettigede kontakter, fordeling til A/B/gruppe uden mail, faktiske modtagere, leveringer, afvisninger, afmeldinger og klager pr. gruppe. Brug den ene registrerede planlagte gruppestart som dag nul for A, B og gruppen uden mail; mål samme syvdagesvindue og divider med oprindeligt tildelte kontakter i hver gruppe. Fjern gentagne hændelses-id’er, og tæl derefter forskellige kontakter med deres første kvalificerende aktivering fra den nævnte produkthændelseskilde højst én gang hver. Behold frafald uden mail i den tildelte gruppe, og marker rater kun blandt leverede mails som sekundær diagnostik. Skeln mellem manglende hændelser og en utilgængelig kilde. Vis tællere, oprindeligt tildelte nævnere, frafald uden mail, protokolafvigelser og rapporternes hentetidspunkter. Angiv om planlagt stikprøve og beslutningsregel blev opfyldt. Udled ikke salg af klik, og brug ikke åbninger som hovedresultat. Fordel ikke kontakter igen, udnævn ikke en vinder for tidligt, opret eller send ikke kampagne, og ændr ikke kontakter. Foreslå ét næste eksperiment som udkast med hypotese og nødvendig godkendelse.

Tjek: Sammenlign Brevos leverings- og klagetotaler med kampagnerapporten på samme hentetidspunkt. Dokumenter, om filtrene for Apple Mail Privacy Protection og botaktivitet blev anvendt; Brevo medregner som standard denne aktivitet. Guiden til e-mailmålinger forklarer, hvorfor åbninger kan vildlede. Rapporter testfasen og eventuel senere udrulning særskilt.

Et gyldigt resultat angiver berettiget population, fordeling, faktisk eksponering, resultatkilde, vindue og usikkerhed. Hvis den på forhånd fastlagte beslutningsregel ikke er opfyldt, så noter »uklart« og skriv udkast til næste test. Mål forskellige kontakter med aktivering inden for syv dage pr. oprindeligt tildelt kontakt i A, B og gruppen uden mail fra samme planlagte gruppestart. Vis leveringer, klager og frafald uden mail særskilt. Rater kun blandt leverede mails er sekundær diagnostik, da levering sker efter den tilfældige fordeling. Uden gyldig tilfældig fordeling eller resultatkilde er en forskel beskrivende, ikke årsagsbevis. Beslutningen skal kunne gentages ud fra loggen. Sammenlign det separate forløb for opfølgning på produktønsker.