Grok Bot i Brevo: przeprowadź eksperyment z kampanią

Hipotetyczna kampania próbna ma 120 kwalifikujących się kontaktów i dwa proponowane tematy wiadomości. Punktem wyjścia jest decyzja przed uruchomieniem. Dodatkowe kliknięcia po dwóch dodatkowych dniach nie oznaczają wygranej.

Zespół chce ustalić, czy praktyczny temat prowadzi do większej liczby ukończonych aktywacji próbnych niż temat wzbudzający ciekawość. Pytanie dotyczy aktywacji, a nie otwarć. Przykład Marketing Analyst od xAI wymaga liczb ze źródłami i zgodnych okien czasowych; zachowaj tę samą dyscyplinę, gdy Grok Bot przygotowuje plan testu. Nie uruchomiliśmy tego połączenia Grok Bot i Brevo na rzeczywistym koncie.

Utrwal pytanie i grupę odbiorców

Przed utworzeniem kampanii zapisz jedno zdanie: „Czy wśród kwalifikujących się, zapisanych na komunikację kontaktów próbnych temat B zmienia liczbę ukończonych aktywacji w ciągu siedmiu dni od zapisanego planowanego początku kohorty w porównaniu z tematem A?”. Utrzymaj tę samą treść, ofertę, adres URL i czas wysyłki. Zapisz jeden planowany czas rozpoczęcia dla całej kohorty. Zdefiniuj zdarzenie aktywacji w systemie produktu, klucz tożsamości kontaktu i obsługę zdarzeń opóźnionych. Jeśli nie da się powiązać tego źródła z odbiorcami Brevo, eksperyment może mierzyć kliknięcia, ale nie odpowie na pytanie o aktywację.

Kwalifikację oprzyj na aktualnych zapisach subskrypcji i blokad wysyłki, nie na obecności w CRM ani domenie firmowej. Usuń duplikaty, kontakty z odbiciami, rezygnacje z subskrypcji, kontakty już aktywowane i uczestników kolidującego testu. Utrwal identyfikatory uprawnionych osób i przydziel je raz odtwarzalną metodą losową z identyfikatorem eksperymentu. Zapisz rejestr przydziałów przed jakąkolwiek wysyłką. Tuż przed wysłaniem ponownie sprawdź zgodę i blokady. Osoby, które utraciły kwalifikację, zapisz jako niewysłane wyłączenia w pierwotnej grupie; nigdy nie przydzielaj ich ponownie ani nie usuwaj po cichu z analizy głównej.

Ta hipotetyczna grupa mogłaby obejmować 48 kontaktów w A, 48 w B i 24 w grupie kontrolnej bez wysyłki. To proponowane grupy, a nie wyniki ani zalecana wielkość próby. Przed startem oblicz potrzebną próbę dla rzeczywistej wartości bazowej i użytecznej wielkości efektu. Mały test może jedynie potwierdzić działanie pomiaru. Planowanie próby opisuje przewodnik po testach A/B.

Rekord	Wymagane pola	Sprawdzenie deterministyczne
Kwalifikacja	Identyfikator kontaktu, źródło subskrypcji, status blokady wysyłki, czas utrwalenia	Każdy przydzielony kontakt spełniał warunki w chwili utrwalenia
Przydział	Identyfikator eksperymentu, identyfikator kontaktu, grupa, czas przydziału	Jedna grupa na kontakt; grupa kontrolna nie otrzymuje wiadomości testowej
Wynik	Identyfikator zdarzenia, identyfikator kontaktu, czas zdarzenia, źródło	Pierwsza kwalifikująca aktywacja kontaktu w tym samym siedmiodniowym oknie od początku kohorty dla wszystkich grup

Skonfiguruj wysyłkę z wymaganym zatwierdzeniem

Natywna kampania A/B Brevo testuje dwa tematy lub warianty treści na równych próbach, wybiera zwycięzcę na podstawie otwarć lub kliknięć, a następnie automatycznie wysyła go pozostałym odbiorcom. To przydatne tylko wtedy, gdy automatyczna dalsza wysyłka została zatwierdzona przed startem. Ten tryb nie zapewnia przerwy na ocenę pierwszego wyniku przez człowieka.

W tym eksperymencie upoważniony i zweryfikowany operator powinien odwzorować utrwalone grupy na konkretne listy lub segmenty odbiorców Brevo. Utwórz dwa szkice kampanii bez zaplanowanej wysyłki, jeden dla A i drugi dla B, z tym samym nadawcą, treścią, adresem docelowym i planowanym oknem. Wyklucz grupę kontrolną z obu. Porównaj każdą listę lub segment z rejestrem, ponownie sprawdź blokady i upewnij się, że powiązanie nie uruchomi obcej automatyzacji. Porównaj rzeczywiste liczby odbiorców i podglądy, a następnie zatwierdź każdą wysyłkę. Jeśli Brevo nie pozwala potwierdzić odwzorowania, zatrzymaj się przed wysłaniem. Przewodnik wprowadzający do połączenia wyjaśnia, dlaczego wyspecjalizowany serwer MCP sam nie ogranicza uprawnień.

Zadeklaruj próg skarg przed startem i zatrzymaj oczekujące wysyłki, jeśli zostanie przekroczony. Zachowaj przydziały i dane o częściowym dostarczeniu; zatrzymany test nie jest zwycięstwem grupy, do której akurat wysłano wcześniej. Obok głównego wyniku pokaż liczbę rezygnacji z subskrypcji i odbić. Nasz przewodnik po double opt-in opisuje granice zgody subskrypcyjnej.

Poproś o raport, a potem wybierz następny eksperyment

Skopiuj to polecenie po dostarczeniu utrwalonego rejestru i raportów z datami:

Analizuj wyłącznie dostarczony identyfikator eksperymentu i źródła. Uzgodnij kwalifikujące się kontakty, przydział do A, B i grupy kontrolnej, rzeczywistych odbiorców, dostarczenia, odbicia, rezygnacje i skargi według grupy. Dla wszystkich kontaktów A, B i grupy kontrolnej przyjmij jeden zapisany planowany początek kohorty jako dzień zero; mierz to samo siedmiodniowe okno i dziel przez pierwotnie przydzielone kontakty w każdej grupie. Usuń powtórzenia identyfikatorów zdarzeń, a potem policz różne kontakty z pierwszą kwalifikującą aktywacją najwyżej raz dla każdego kontaktu ze wskazanego źródła zdarzeń produktu. Zachowaj niewysłane wyłączenia w ich przydzielonej grupie i oznacz wskaźniki dotyczące tylko dostarczonych wiadomości jako pomocniczą diagnostykę. Rozróżnij brak zdarzeń od niedostępności źródła. Pokaż liczniki, pierwotne mianowniki przydziału, niewysłane wyłączenia, odstępstwa od protokołu i czasy pobrania raportów. Podaj, czy osiągnięto planowaną próbę i spełniono regułę decyzji. Nie wnioskuj o sprzedaży z kliknięć ani nie używaj otwarć jako głównego wyniku. Nie zmieniaj przydziału kontaktów, nie ogłaszaj przedwczesnego zwycięzcy, nie twórz ani nie wysyłaj kampanii i nie zmieniaj kontaktu. Zaproponuj szkic jednego następnego eksperymentu z hipotezą i wymaganym zatwierdzeniem.

Sprawdź: porównaj łączne dostarczenia i skargi w Brevo z raportem kampanii pobranym w tym samym momencie. Udokumentuj, czy zastosowano filtry Apple Mail Privacy Protection i aktywności botów; Brevo domyślnie uwzględnia taką aktywność. Przewodnik po metrykach e-mail marketingu wyjaśnia, dlaczego otwarcia bywają mylące. Raportuj oddzielnie etap testu i ewentualną późniejszą wysyłkę.

Rzetelny wynik określa kwalifikującą się populację, przydział, rzeczywistą ekspozycję, źródło wyniku, okno i niepewność. Jeśli wcześniej zadeklarowana reguła decyzji nie jest spełniona, zapisz „nierozstrzygający” i przygotuj następny test. Mierz liczbę różnych kontaktów z pierwszą kwalifikującą aktywacją w ciągu siedmiu dni, podzieloną przez pierwotną liczbę przydzielonych kontaktów w A, B i grupie kontrolnej, od tego samego planowanego początku kohorty. Osobno pokaż dostarczenia, skargi i niewysłane wyłączenia. Wskaźniki tylko dla dostarczonych wiadomości są diagnostyką pomocniczą, ponieważ dostarczenie następuje po losowaniu. Bez poprawnego losowego przydziału lub źródła wyniku różnica ma charakter opisowy, nie przyczynowy. Decyzja musi dać się odtworzyć z rejestru. Porównaj osobną pętlę odpowiedzi na opinie o produkcie.