Ezen az oldalon
Egy feltételezett próbakampányban 120 jogosult kontakt és két tárgymező-javaslat szerepel. A döntő lépés az indítás előtti döntés. Két nappal később érkező további kattintások önmagukban nem jelentenek győzelmet.
A csapat azt szeretné megtudni, hogy a tárgyilagos tárgy több befejezett próbaaktiválást hoz-e, mint a kíváncsiságra építő. A kérdés az aktiválásról szól, nem a megnyitásról. Az xAI Marketing Analyst példája forrással igazolt számokat és azonos időablakokat vár el; ugyanezt követeld meg, amikor a Grok Bot teszttervet készít. Ezt a Grok Bot és Brevo közötti kapcsolatot nem próbáltuk ki élő fiókban.
Rögzítsd előre a kérdést és a résztvevőket
A kampány összeállítása előtt írj le egy mondatot: „A jogosult, e-mailre feliratkozott próbahasználók között a B tárgy megváltoztatja-e a befejezett aktiválások számát a csoport rögzített, tervezett kezdésétől számított hét napon belül az A tárgyhoz képest?” A levéltörzs, az ajánlat, az URL és a küldési idő maradjon változatlan. Az egész csoporthoz egyetlen tervezett kezdési időt rögzíts. Határozd meg az aktiválási eseményt a termékrendszerben, a kontakt azonosítóját és a késve érkező események kezelését. Ha ezt a forrást nem lehet összekapcsolni a Brevo címzettjeivel, a kísérlet kattintást mérhet, de az aktiválási kérdésre nem válaszolhat.
A jogosultságot az aktuális feliratkozási és kizárási nyilvántartásból állapítsd meg, ne CRM-tagságból vagy vállalati tartományból. Szűrd ki a duplikátumokat, a visszapattanó és leiratkozott címeket, a már aktivált kontaktokat és az ütköző teszt résztvevőit. Rögzítsd a jogosult kontaktazonosítókat, majd mindegyiket egyszer oszd be megismételhető véletlen módszerrel és kísérletazonosítóval. Minden küldés előtt mentsd el a besorolási naplót. Közvetlenül küldés előtt ellenőrizd újra a hozzájárulást és a kizárásokat. A közben jogosulatlanná vált személyt jelöld küldés nélküli kiesőként az eredeti ágában; ne sorold át és ne tüntesd el csendben az elsődleges elemzésből.
A feltételezett csoportban 48 kontakt kerülhet A-ba, 48 B-be és 24 a küldés nélküli kontrollba. Ezek javasolt csoportok, nem eredmények vagy mintaméret-ajánlás. Indítás előtt a saját kiinduló arányod és a számodra érdemi hatás alapján számítsd ki a szükséges mintát. Egy kis teszt talán csak azt bizonyítja, hogy a mérés működik. A minta tervezéséhez nézd meg az A/B-tesztelési útmutatót.
| Nyilvántartás | Szükséges mezők | Egyértelmű ellenőrzés |
|---|---|---|
| Jogosultság | Kontaktazonosító, feliratkozás forrása, kizárási állapot, rögzítés ideje | Minden besorolt kontakt jogosult volt a rögzítéskor |
| Besorolás | Kísérletazonosító, kontaktazonosító, ág, besorolás ideje | Egy kontakt egy ágba kerül; a kontroll nem kap tesztüzenetet |
| Eredmény | Eseményazonosító, kontaktazonosító, esemény ideje, forrás | Kontaktonként az első megfelelő aktiválás ugyanabban, a csoport kezdéséhez rögzített hétnapos ablakban, minden ágnál |
Úgy állítsd be a küldést, hogy megmaradjon a jóváhagyás
A Brevo beépített A/B-kampánya két tárgyat vagy két tartalomváltozatot tesztel azonos méretű mintán, megnyitás vagy kattintás alapján győztest választ, majd automatikusan elküldi a többi címzettnek. Ez csak akkor megfelelő, ha az automatikus kiterjesztést már az indítás előtt jóváhagyták. Nincs benne szünet, amely alatt valaki megvizsgálhatná az első eredményt.
Ehhez a kísérlethez a rögzített ágakat jóváhagyott, ellenőrzött munkatárssal rendeld hozzá külön Brevo-címzettlistákhoz vagy szegmensekhez. Hozz létre két időzítetlen kampányvázlatot A és B számára, azonos feladóval, törzzsel, céloldallal és tervezett küldési ablakkal. A kontroll maradjon ki mindkettőből. Vesd össze a listákat vagy szegmenseket a besorolási naplóval, ellenőrizd újra a kizárásokat, és győződj meg róla, hogy a hozzárendelés nem indít másik automatizálást. Hasonlítsd össze a tényleges címzettszámot és az előnézeteket, majd hagyd jóvá külön a két küldést. Ha a Brevo nem tudja igazolni a hozzárendelést, állj meg a küldés előtt. A kezdő kapcsolódási útmutató elmagyarázza, miért nem korlátozza önmagában a jogosultságokat egy célzott MCP-szerver.
Előre állíts be panasz-küszöböt, és ha átlépitek, állítsd le a még függő küldéseket. Őrizd meg a besorolást és a részleges kézbesítések adatait; a leállított tesztben nem győz az az ág, amelyik előbb ment ki. Az elsődleges eredmény mellett mutasd a leiratkozásokat és a visszapattanásokat. A kettős megerősítésről szóló útmutató tárgyalja a hozzájárulási határt.
Kérj jelentést, majd döntsd el a következő kísérletet
A rögzített napló és a dátummal ellátott jelentések megadása után másold be ezt az utasítást:
Csak az általam megadott kísérletazonosítót és forrásokat elemezd. Egyeztesd a jogosult kontaktokat, az A/B/kontroll besorolást, a tényleges címzetteket, a kézbesítéseket, visszapattanásokat, leiratkozásokat és panaszokat áganként. Minden A, B és kontroll kontakt esetén a csoport egyetlen rögzített tervezett kezdését tekintsd nulladik napnak. Ugyanazt a hétnapos ablakot mérd, és minden ágnál az eredetileg besorolt kontaktok számával ossz. Távolítsd el az ismétlődő eseményazonosítókat, majd az első megfelelő aktiválást a megnevezett termékesemény-forrásból minden különböző kontaktnál legfeljebb egyszer számold. A küldés nélkül kiesőket tartsd az eredeti águkban, és a csak kézbesített címzettekre számolt arányokat másodlagos diagnosztikának jelöld. Különböztesd meg a hiányzó eseményt a nem elérhető forrástól. Mutasd a számlálókat, az eredeti nevezőket, a küldés nélküli kiesőket, a protokolleltéréseket és a jelentések lekérési idejét. Mondd meg, teljesült-e a tervezett mintaméret és döntési szabály. Kattintásból ne következtess eladásra, és a megnyitást ne használd elsődleges eredménynek. Ne sorolj át kontaktokat, ne hirdess idő előtti győztest, ne hozz létre vagy küldj kampányt, és ne módosíts kontaktot. Javasolj vázlatként egy következő kísérletet, hipotézissel és szükséges jóváhagyással.
Ellenőrzés: hasonlítsd össze a Brevo kézbesítési és panaszadatait a kampányjelentéssel azonos lekérési időpontban. Dokumentáld, alkalmazták-e az Apple Mail Privacy Protection és a bottevékenység szűrőit; a Brevo alapból beleszámolja ezt a tevékenységet. Az e-mail-mutatókról szóló útmutató elmagyarázza, miért félrevezető a megnyitás. A tesztfázist és a későbbi kiterjesztést külön jelentsd.
Érvényes eredmény megnevezi a jogosult népességet, a besorolást, a tényleges kitettséget, az eredmény forrását, az időablakot és a bizonytalanságot. Ha az előre rögzített döntési szabály nem teljesül, jelöld „nem eldönthetőnek”, és tervezz új tesztet. Hét napon belüli különböző aktiválásokat mérj eredetileg besorolt kontaktonként A-ban, B-ben és kontrollban, ugyanattól a tervezett kezdéstől. A kézbesítéseket, panaszokat és küldés nélküli kiesőket külön mutasd. A csak kézbesítettekre számolt arány másodlagos diagnosztika, mert a kézbesítés a véletlen besorolás után történik. Érvényes véletlen besorolás vagy eredményforrás nélkül a különbség leíró, nem ok-okozati. A döntés legyen megismételhető a naplóból. Hasonlítsd össze a termékvisszajelzési követés külön folyamatával.
Gyakran Ismételt Kérdések
Kijelölhet a Grok Bot Brevo-kampánygyőztest pusztán kattintások alapján?
Csak akkor, ha a kattintás volt az előre kijelölt eredmény, és a rögzített összehasonlításnak elég bizonyítéka van. A kattintás nem bizonyít eladást. Eladási kérdéshez összekapcsolt rendelésforrás, kifejezett attribúciós módszer és megfigyelési ablak kell; enélkül jelöld az eladást nem elérhetőnek.
A Brevo beépített A/B-tesztje vár a jóváhagyásomra a győztes kiküldése előtt?
Nem. A Brevo dokumentációja szerint a tesztidőszak után automatikusan elküldi a kiválasztott nyertest a maradék közönségnek. Csak akkor használd ezt a módot, ha a változatokat, mutatót és kiterjesztést előre jóváhagyták. Felülvizsgálati kapuhoz külön jóváhagyott és ellenőrzött listákat vagy szegmenseket és kampányokat használj.
Mi történjen, ha nő a panaszok száma a teszt alatt?
Alkalmazd az indítás előtt rögzített biztonsági küszöböt, állítsd le a függő küldéseket, őrizd meg a besorolási és kézbesítési naplókat, és vizsgáld meg a panaszok forrását. Leállítás után ne válassz csendben nyertest, és ne sorolj át kontaktokat.