En esta página
Una campaña de prueba hipotética tiene 120 contactos elegibles y dos asuntos propuestos. El activador es la decisión anterior al lanzamiento. Más clics después de dos días adicionales no significan una victoria.
El equipo quiere saber si un asunto práctico produce más activaciones de prueba completadas que otro que despierta curiosidad. La pregunta trata de activaciones, no de aperturas. El ejemplo Marketing Analyst de xAI exige cifras con fuentes y ventanas equivalentes; aplica esa disciplina cuando Grok Bot redacte un plan. No hemos ejecutado esta conexión entre Grok Bot y Brevo en una cuenta real.
Congela la pregunta y las personas
Escribe una frase antes de construir la campaña: «Entre contactos de prueba elegibles y suscritos, ¿cambia el asunto B la activación completada dentro de siete días del inicio programado y registrado de la cohorte frente al asunto A?». Mantén fijos cuerpo, oferta, URL y hora de envío. Registra una hora de inicio programada para toda la cohorte. Define en el sistema del producto el evento de activación, su clave de identidad de contacto y cómo tratar eventos tardíos. Si esa fuente no puede relacionarse con los destinatarios de Brevo, el experimento puede medir clics, pero no responder a la pregunta de activación.
Usa registros actuales de suscripción y supresión, no pertenencia al CRM ni dominio corporativo, para definir elegibilidad. Elimina duplicados, rebotes, bajas, contactos ya activados y personas en otra prueba incompatible. Congela los IDs elegibles y asígnalos una vez con método aleatorio reproducible e ID de experimento. Guarda el registro de asignación antes de enviar. Vuelve a comprobar consentimiento y supresión inmediatamente antes del envío. Registra a quienes dejan de ser elegibles como bajas sin envío en su grupo original; nunca los reasignes ni los retires silenciosamente del análisis principal.
Ese grupo hipotético podría asignar 48 personas a A, 48 a B y 24 a un grupo sin envío. Son grupos propuestos, no resultados ni recomendación sobre tamaño de muestra. Calcula antes de lanzar la muestra necesaria para tu tasa base y efecto útil reales. Una prueba pequeña quizá solo demuestre que la medición funciona. Consulta la guía de pruebas A/B para planificar la muestra.
| Registro | Campos necesarios | Comprobación determinista |
|---|---|---|
| Elegibilidad | ID de contacto, fuente de suscripción, estado de supresión, hora de congelación | Cada contacto asignado era elegible al congelar |
| Asignación | ID de experimento, ID de contacto, grupo, hora de asignación | Un grupo por contacto; el grupo sin envío no recibe correo de prueba |
| Resultado | ID de evento, ID de contacto, hora de evento, fuente | Primera activación válida por contacto en la misma ventana de siete días anclada al inicio de cohorte para todos los grupos |
Configura un envío que respete la revisión
La campaña A/B nativa de Brevo prueba dos asuntos o dos versiones del contenido con muestras iguales, elige ganador por aperturas o clics y después lo envía automáticamente al resto. Úsala solo cuando la distribución automática se apruebe antes de lanzar. No permite pausar para que una persona inspeccione el primer resultado.
Para este experimento, asigna los grupos congelados a listas o segmentos explícitos de destinatarios en Brevo mediante un operador autorizado y verificado. Crea dos borradores de campaña sin programar, uno para A y otro para B, con remitente, cuerpo, destino y ventana prevista iguales. Excluye al grupo de control de ambos. Compara cada lista o segmento con el registro de asignación, revisa supresiones y confirma que la asignación no activará otra automatización. Contrasta número real de destinatarios y vistas previas, y autoriza cada envío. Si Brevo no puede demostrar la correspondencia, detén el proceso antes de enviar. La guía inicial de conexión explica por qué un servidor MCP limitado no restringe por sí mismo los permisos.
Declara de antemano un umbral de quejas y detén envíos pendientes si se supera. Conserva la asignación y cualquier entrega parcial; una prueba detenida no es una victoria para el grupo que se envió primero. Presenta bajas y rebotes junto al resultado principal. Nuestra guía de doble opt-in explica el límite de suscripción.
Pide un informe y decide el siguiente experimento
Copia este prompt después de proporcionar el registro congelado e informes fechados:
Analiza solo el ID de experimento y las fuentes que proporcione. Concilia contactos elegibles, asignación A/B/grupo sin envío, destinatarios reales, entregas, rebotes, bajas y quejas por grupo. Usa el único inicio programado y registrado de la cohorte como día cero para A, B y grupo sin envío; mide la misma ventana de siete días y divide por contactos originalmente asignados en cada grupo. Elimina IDs de evento repetidos y luego cuenta una sola vez por contacto su primera activación válida de la fuente de eventos del producto indicada. Mantén las bajas sin envío en su grupo asignado y etiqueta las tasas basadas solo en entregas como diagnósticos secundarios. Distingue eventos ausentes de una fuente no disponible. Muestra numeradores, denominadores asignados originalmente, bajas sin envío, desviaciones del protocolo y horas de consulta de informes. Indica si se cumplieron muestra y regla de decisión previstas. No deduzcas ventas de clics ni uses aperturas como resultado principal. No reasignes contactos, declares un ganador prematuro, crees o envíes campañas ni cambies contactos. Propón el siguiente experimento como borrador, con hipótesis y aprobación necesaria.
Comprobación: compara totales de entregas y quejas de Brevo con el informe de campaña en la misma hora de consulta. Documenta si se aplicaron filtros de Apple Mail Privacy Protection y actividad de bots; Brevo incluye esa actividad por defecto. La guía de métricas de correo explica por qué las aperturas engañan. Informa por separado de la fase de prueba y cualquier distribución posterior.
Un resultado válido identifica población elegible, asignación, exposición real, fuente del resultado, ventana e incertidumbre. Si no se cumple la regla de decisión predefinida, registra «inconcluso» y redacta la siguiente prueba. Mide activaciones distintas de siete días por contacto originalmente asignado en A, B y control desde el mismo inicio programado de cohorte. Muestra entregas, quejas y bajas sin envío por separado. Las tasas solo de entregas son diagnósticos secundarios porque la entrega ocurre después de la aleatorización. Sin asignación aleatoria válida ni fuente del resultado, la diferencia es descriptiva, no causal. La decisión debe poder reproducirse desde el registro. Compara el proceso aparte de seguimiento de solicitudes de producto.
Preguntas frecuentes
¿Puede Grok Bot declarar ganadora una campaña por sus clics?
Solo si los clics fueron el resultado predefinido y la comparación fija tiene pruebas suficientes. Los clics no demuestran ventas. Para preguntar por ventas, usa una fuente de pedidos conectada, atribución explícita y ventana de observación; si no, informa que las ventas no están disponibles.
¿La prueba A/B nativa de Brevo espera mi revisión antes de enviar la variante ganadora?
No. Brevo envía automáticamente la variante elegida al resto del público tras la fase de prueba. Usa ese modo solo si variantes, métrica y distribución se aprobaron antes. Si necesitas revisión, usa listas o segmentos y campañas separados, comprobados y aprobados.
¿Qué hacer si aumentan las quejas durante la prueba?
Aplica el umbral de seguridad definido antes del lanzamiento, detén envíos pendientes y conserva los registros de asignación y entrega. Revisa el origen de las quejas. No elijas discretamente un ganador ni reasignes contactos tras parar.