På denna sida
En hypotetisk testkampanj har 120 berättigade kontakter och två föreslagna ämnesrader. Utlösaren är beslutet före start. Fler klick efter två extra dagar är ingen seger.
Teamet vill veta om en praktisk ämnesrad ger fler slutförda provaktiveringar än en som väcker nyfikenhet. Frågan gäller aktiveringar, inte öppningar. xAI:s Marketing Analyst-exempel kräver källbelagda tal och lika tidsfönster; använd samma noggrannhet när Grok Bot skriver testplanen. Vi har inte kört den här Grok Bot-Brevo-anslutningen i ett skarpt konto.
Frys frågan och personerna
Skriv en mening före kampanjbygget: ”Ändrar ämne B slutförd aktivering inom sju dagar från gruppens registrerade planerade start bland berättigade, prenumererande provkontakter jämfört med ämne A?” Håll text, erbjudande, URL och sändningstid fasta. Registrera en planerad starttid för hela gruppen. Definiera aktiveringshändelsen i produktsystemet, kontaktens identitetsnyckel och hur försenade händelser hanteras. Kan källan inte kopplas till Brevo-mottagare, kan experimentet mäta klick men inte besvara aktiveringsfrågan.
Använd aktuella prenumerations- och spärrposter, inte CRM-tillhörighet eller företagsdomän, för att definiera behörighet. Ta bort dubletter, studsningar, avregistrerade, redan aktiverade kontakter och personer i ett motstridigt test. Frys berättigade ID:n och fördela dem en gång med reproducerbar slumpmetod och experiment-ID. Spara fördelningsloggen före utskick. Kontrollera samtycke och spärr igen precis före utskick. Registrera dem som senare blir obehöriga som bortfall utan utskick i sin ursprungliga grupp; fördela dem aldrig på nytt och ta inte tyst bort dem ur huvudanalysen.
Den hypotetiska gruppen kan tilldela 48 till A, 48 till B och 24 till en grupp utan mejl. Det är föreslagna grupper, inte resultat eller rekommendation om urvalsstorlek. Beräkna före start nödvändigt urval från din faktiska grundnivå och användbara effekt. Ett litet test kanske bara visar att mätningen fungerar. Guiden för A/B-test hjälper dig planera urvalet.
| Post | Nödvändiga fält | Deterministisk kontroll |
|---|---|---|
| Behörighet | Kontakt-ID, prenumerationskälla, spärrstatus, frystid | Varje tilldelad kontakt var berättigad när gruppen frystes |
| Fördelning | Experiment-ID, kontakt-ID, grupp, fördelningstid | En grupp per kontakt; gruppen utan mejl får inget testutskick |
| Utfall | Händelse-ID, kontakt-ID, händelsetid, källa | Första kvalificerande aktivering per kontakt i samma sjudagarsfönster från gruppstart för alla grupper |
Ställ in ett utskick som kräver granskning
Brevos inbyggda A/B-kampanj testar två ämnesrader eller innehållsvarianter på lika stora testurval, väljer vinnare efter öppningar eller klick och skickar sedan automatiskt till resten. Det passar bara om automatisk utrullning godkänts före start. Det finns ingen paus för en människa att granska första resultatet.
Koppla för detta experiment de frysta grupperna till uttryckliga Brevo-mottagarlistor eller segment genom en godkänd, verifierad operatör. Skapa två oschemalagda kampanjutkast, ett för A och ett för B, med samma avsändare, text, destination och planerade fönster. Håll gruppen utan mejl utanför båda. Jämför varje lista eller segment med loggen, kontrollera spärr igen och se till att kopplingen inte utlöser annan automatisering. Jämför faktiska mottagarantal och förhandsvisningar, och godkänn sedan varje utskick. Om Brevo inte kan bevisa kopplingen stannar du före utskick. Startguiden för anslutningen förklarar varför en avgränsad MCP-server inte begränsar behörigheter i sig.
Bestäm en klagomålsgräns i förväg och stoppa väntande utskick om den passeras. Bevara fördelning och delvisa leveranser; ett avbrutet test är ingen seger för gruppen som skickades först. Visa avregistreringar och studsningar bredvid huvudutfallet. Guiden om dubbel opt-in beskriver prenumerationsgränsen.
Be om rapport och välj nästa experiment
Kopiera denna prompt efter att ha gett den frysta loggen och daterade rapporter:
Analysera bara experiment-ID och källor jag ger. Stäm av berättigade kontakter, fördelning till A/B/grupp utan mejl, faktiska mottagare, leveranser, studsningar, avregistreringar och klagomål per grupp. Använd den enda registrerade planerade gruppstarten som dag noll för A, B och gruppen utan mejl; mät samma sjudagarsfönster och dela med ursprungligt tilldelade kontakter i varje grupp. Ta bort upprepade händelse-ID:n och räkna sedan olika kontakter med deras första kvalificerande aktivering från namngiven produkthändelsekälla högst en gång var. Behåll bortfall utan utskick i tilldelad grupp och märk tal enbart bland levererade mejl som sekundär diagnostik. Skilj saknade händelser från otillgänglig källa. Visa täljare, ursprungligt tilldelade nämnare, bortfall utan utskick, protokollavvikelser och rapporternas hämtningstider. Ange om planerat urval och beslutsregel uppfylldes. Dra inte slutsatser om försäljning från klick och använd inte öppningar som huvudutfall. Fördela inte om kontakter, utse inte vinnare i förtid, skapa eller skicka inte kampanj och ändra inte kontakter. Föreslå ett nästa experiment som utkast med hypotes och nödvändigt godkännande.
Kontroll: Jämför Brevos leverans- och klagomålstal med kampanjrapporten vid samma hämtningstidpunkt. Dokumentera om filtren för Apple Mail Privacy Protection och botaktivitet tillämpades; Brevo räknar med den aktiviteten som standard. Guiden om e-postmått förklarar varför öppningar kan vilseleda. Redovisa testfas och senare utrullning separat.
Ett giltigt resultat anger berättigad population, fördelning, faktisk exponering, utfallskälla, fönster och osäkerhet. Om beslutsregeln från före start inte uppfylls, skriv ”inte avgjort” och ta fram nästa testutkast. Mät olika kontakter med aktivering inom sju dagar per ursprungligt tilldelad kontakt i A, B och gruppen utan mejl från samma planerade gruppstart. Visa leveranser, klagomål och bortfall utan utskick separat. Tal bara bland levererade mejl är sekundär diagnostik eftersom leveransen sker efter slumpfördelningen. Utan giltig slumpfördelning eller utfallskälla är en skillnad beskrivande, inte kausal. Beslutet måste kunna återskapas från loggen. Jämför det separata flödet för uppföljning av produktönskemål.
Vanliga Frågor
Kan Grok Bot utse en vinnande kampanj utifrån klick?
Bara om klick var utfallet som bestämdes i förväg och den fasta jämförelsen har tillräckliga belägg. Klick bevisar inte försäljning. För en försäljningsfråga behövs kopplad orderkälla med tydlig attribuering och observationsfönster; annars är försäljningsdata otillgängliga.
Väntar Brevos inbyggda A/B-test på min granskning innan vinnaren skickas till resten?
Nej. Brevo skickar automatiskt vald variant till resten av målgruppen efter testperioden. Använd det bara om varianter, mått och utrullning godkänts i förväg. För mänsklig granskning använder du separata godkända, verifierade listor eller segment och kampanjer.
Vad händer om klagomål ökar under testet?
Använd säkerhetsgränsen som bestämdes före start, stoppa väntande utskick och bevara fördelnings- och leveransdata. Undersök klagomålens källa. Välj inte vinnare i tysthet och fördela inte om kontakter efter stopp.