Na ovoj stranici
Hipotetička probna kampanja ima 120 podobnih kontakata i dva predloga naslova imejla. Okidač je odluka pre pokretanja. Dodatni klikovi posle još dva dana nisu pobeda.
Tim želi da utvrdi da li praktičan naslov dovodi do više završenih aktivacija probnog naloga nego naslov koji budi radoznalost. Pitanje se odnosi na aktivacije, ne na otvaranja. Primer xAI Marketing Analyst traži brojke sa izvorom i uporedive vremenske okvire; primenite isto pravilo kada Grok Bot sastavlja plan testa. Nismo isprobali ovu vezu između Grok Bot i Brevo u aktivnom nalogu.
Utvrdite pitanje i učesnike
Pre izrade kampanje zapišite: „Da li među podobnim, pretplaćenim kontaktima sa probnim nalogom naslov B menja broj završenih aktivacija u roku od sedam dana od zabeleženog planiranog početka kohorte u poređenju sa naslovom A?“ Telo, ponudu, URL i vreme slanja ostavite istim. Zabeležite jedno planirano vreme početka za celu kohortu. Definišite događaj aktivacije u sistemu proizvoda, ključ identiteta kontakta i obradu zakasnelih događaja. Ako taj izvor ne može da se poveže sa primaocima u Brevo nalogu, eksperiment može da meri klikove, ali ne može da odgovori na pitanje o aktivaciji.
Podobnost utvrdite iz važećih evidencija pretplate i isključenja, a ne iz članstva u CRM-u ili domena kompanije. Uklonite duplikate, odbijene adrese, odjavljene i već aktivirane kontakte, kao i učesnike drugog testa koji bi se preklapao. Zaključajte podobne ID-jeve i jednom ih rasporedite ponovljivim postupkom slučajne dodele uz ID eksperimenta. Sačuvajte evidenciju raspodele pre slanja. Neposredno pre slanja ponovo proverite pristanak i isključenja. Svakoga ko je u međuvremenu izgubio podobnost zabeležite kao kontakt bez poslate poruke u prvobitnoj grupi; ne dodeljujte ga drugoj grupi i ne uklanjajte ga prećutno iz glavne analize.
Ta hipotetička grupa mogla bi da dodeli po 48 kontakata grupama A i B, a 24 kontrolnoj grupi bez slanja. To su predložene grupe, ne rezultati ni preporuka za veličinu uzorka. Pre pokretanja izračunajte potreban uzorak za stvarnu početnu stopu i efekat koji vam je bitan. Mali test može samo da potvrdi da merenje radi. Za planiranje uzorka pogledajte vodič za A/B testiranje.
| Evidencija | Potrebna polja | Deterministička provera |
|---|---|---|
| Podobnost | ID kontakta, izvor pretplate, status isključenja, vreme zaključavanja | Svaki dodeljeni kontakt bio je podoban pri zaključavanju |
| Raspodela | ID eksperimenta, ID kontakta, grupa, vreme dodele | Jedna grupa po kontaktu; kontrolnoj grupi se ništa ne šalje |
| Ishod | ID događaja, ID kontakta, vreme događaja, izvor | Prva podobna aktivacija po kontaktu u istom sedmodnevnom periodu od početka kohorte za sve grupe |
Podesite slanje koje poštuje pregled pre odobrenja
Brevo ugrađena A/B kampanja ispituje dva naslova ili dve verzije sadržaja na jednakim probnim uzorcima, bira pobednika po otvaranjima ili klikovima, a zatim ga automatski šalje ostatku publike. Koristite je samo ako je automatsko dalje slanje odobreno pre pokretanja. Ona ne nudi pauzu u kojoj osoba može da pregleda prvi rezultat.
Za ovaj eksperiment ovlašćeni operater treba da poveže zaključane grupe sa jasno određenim listama ili segmentima primalaca u Brevo nalogu, nakon provere. Napravite dva nacrta kampanje bez zakazanog slanja, za A i B, sa istim pošiljaocem, telom, odredištem i planiranim vremenskim okvirom. Kontrolnu grupu izostavite iz oba. Uporedite svaku listu ili segment sa evidencijom, ponovo proverite isključenja i uverite se da povezivanje neće pokrenuti drugu automatizaciju. Uporedite stvarne brojeve primalaca i preglede, pa odobrite svako slanje. Ako ne možete da potvrdite raspodelu u Brevo nalogu, zaustavite se pre slanja. Početni vodič objašnjava zašto namenski MCP server sam po sebi ne ograničava dozvole.
Unapred odredite prag za pritužbe i zaustavite slanja koja čekaju ako se prag pređe. Sačuvajte raspodelu i podatke o delimičnoj isporuci; zaustavljen test nije pobeda grupe koja je poslata prva. Uz glavni ishod pratite odjave i odbijene poruke. Vodič za dvostruku potvrdu prijave pokriva granicu pretplate.
Zatražite izveštaj, pa odlučite o sledećem eksperimentu
Kopirajte ovaj upit pošto priložite zaključanu evidenciju i datirane izveštaje:
Analizirajte samo ID eksperimenta i izvore koje dostavim. Po grupama uskladite podobne kontakte, raspodelu na A, B i kontrolnu grupu, stvarne primaoce, isporuke, odbijanja, odjave i pritužbe. Jedan zabeleženi planirani početak kohorte neka bude nulti dan za sve kontakte u grupama A, B i kontrolnoj grupi; merite isti sedmodnevni period i delite brojem prvobitno dodeljenih kontakata u svakoj grupi. Uklonite ponovljene ID-jeve događaja, pa iz imenovanog izvora događaja proizvoda brojite različite kontakte sa najviše jednom prvom podobnom aktivacijom. Kontakti kojima ništa nije poslato ostaju u prvobitnoj grupi, a stope po isporučenim porukama označite kao sporednu dijagnostiku. Razlikujte događaje koji nedostaju od nedostupnog izvora. Prikažite brojnike, prvobitne imenioce, kontakte bez slanja, odstupanja od plana i vremena preuzimanja izveštaja. Navedite da li su planirani uzorak i pravilo odlučivanja ispunjeni. Ne zaključujte o prodaji iz klikova i ne koristite otvaranja kao glavni ishod. Ne premeštajte kontakte, ne proglašavajte ranog pobednika, ne pravite niti šaljite kampanju i ne menjajte kontakt. Predložite jedan sledeći eksperiment kao nacrt, sa hipotezom i potrebnim odobrenjem.
Provera: uporedite isporuke i pritužbe u Brevo nalogu sa izveštajem kampanje u istom trenutku preuzimanja. Zabeležite da li su primenjeni filteri za Apple Mail Privacy Protection i aktivnost botova; Brevo takvu aktivnost podrazumevano uključuje. Vodič za imejl metrike objašnjava zašto otvaranja mogu da zavaraju. Probnu fazu i eventualno kasnije šire slanje prijavite odvojeno.
Valjan rezultat navodi podobnu populaciju, raspodelu, stvarnu izloženost, izvor ishoda, period i neizvesnost. Ako unapred utvrđeno pravilo odlučivanja nije ispunjeno, zabeležite „neodlučno“ i pripremite sledeći test. Merite različite kontakte sa aktivacijom tokom sedam dana po prvobitno dodeljenom kontaktu u grupama A, B i kontrolnoj grupi, od istog planiranog početka kohorte. Odvojeno prikažite isporuke, pritužbe i kontakte bez slanja. Stope samo za isporučene poruke služe kao sporedna dijagnostika jer do isporuke dolazi posle slučajne raspodele. Bez valjane slučajne dodele ili izvora ishoda, razlika je opisna, a ne uzročna. Odluka mora moći da se ponovi iz evidencije. Pogledajte i zaseban postupak praćenja povratnih informacija o proizvodu.
Često Postavljana Pitanja
Može li Grok Bot da proglasi pobednika Brevo kampanje na osnovu klikova?
Samo ako su klikovi unapred određeni ishod i fiksno poređenje ima dovoljno dokaza. Klikovi ne dokazuju prodaju. Za pitanje o prodaji koristite povezan izvor porudžbina sa jasnim pravilom pripisivanja i periodom posmatranja; inače prodaju označite kao nedostupnu.
Da li Brevo ugrađeni A/B test čeka moj pregled pre slanja pobednika?
Ne. Brevo dokumentuje automatsko slanje izabranog pobednika ostatku publike po isteku probnog perioda. Koristite taj režim samo kada su verzije, metrika i šire slanje unapred odobreni. Za pregled pre slanja koristite odvojeno odobrene, proverene liste ili segmente i kampanje.
Šta ako broj pritužbi poraste tokom testa?
Primenite bezbednosni prag određen pre pokretanja, zaustavite slanja koja čekaju, sačuvajte podatke o raspodeli i isporuci i proverite izvor pritužbi. Ne birajte prećutno pobednika i ne premeštajte kontakte posle zaustavljanja.