Pruebas A/B en campañas
Las pruebas A/B te permiten probar distintas versiones de tus campañas para ver cuál funciona mejor y optimizar tus mensajes.
¿Nuevo en los grupos de control? Grupos de control explicados cubre los tres: qué recibe cada uno y qué te puede decir cada prueba.
¿Qué es una prueba A/B?
Una prueba A/B (también llamada split testing) envía distintas versiones de tu campaña a distintos grupos de tu audiencia para determinar cuál rinde mejor.
Ejemplo:
- Variante A: "Consigue un 20% de descuento en tu primera compra"
- Variante B: "Ahorra 10 € en tu primer pedido"
Envía cada una al 50% de tu audiencia y observa cuál convierte más.
Cuándo usar pruebas A/B
Asuntos (email)
Prueba distintos asuntos para mejorar la tasa de apertura:
Variante A: "Tu descuento exclusivo dentro"
Variante B: "Ahorra un 20% solo hoy"
Variante C: "Oferta por tiempo limitado para ti"
Contenido del mensaje
Prueba distintos textos:
Variante A: Explicación larga con beneficios
Variante B: Mensaje corto y directo con CTA
Variante C: Narrativa en forma de historia
Llamada a la acción
Prueba distintos CTA:
Variante A: "Comprar ahora"
Variante B: "Quiero mi descuento"
Variante C: "Empezar a comprar"
Momento de envío
Prueba distintas horas de envío:
Variante A: Lunes 9:00
Variante B: Miércoles 14:00
Variante C: Viernes 18:00
Datos del remitente
El remitente de email es por variante: cada variante A/B define su propio remitente, From, Reply-To y BCC en la pestaña Ajustes del editor de variante (sección Remitente). Así puedes probar la línea From, una de las mayores palancas de la tasa de apertura:
Variante A: From "John de Empresa" <[email protected]>
Variante B: From "Equipo de Empresa" <[email protected]>
Variante C: From "Empresa" <[email protected]>
Los remitentes y las direcciones de Reply-To y BCC que puedes elegir provienen de las listas gestionadas de tu espacio de trabajo - consulta Configuración de email.
Crear una prueba A/B
Las variantes A/B se redactan dentro del contenedor VariantTabs del paso Redactar, el mismo que usa cada canal. Añade variantes con el botón + Añadir variante al final de la tira de pestañas, y después redacta el cuerpo de cada pestaña igual que redactarías una campaña de una sola variante.
Paso 1: Abre el asistente de campaña
- Ve a Campañas → Nueva campaña
- Completa el paso Detalles
- Configura la Entrega (o, para campañas in-app, el selector de disparador de Entrega)
Paso 2: Añade variantes en Redactar
El paso Redactar empieza con una única pestaña de variante etiquetada A. Pulsa + Añadir variante para añadir una segunda (B), y repite para más variantes. Cada pestaña incluye:
- Un punto de color para identificarla de un vistazo
- Una etiqueta de peso de solo lectura (la asignación está en la tarjeta A/B de abajo)
- Un punto ámbar si la variante aún no se ha redactado
Para variantes de email e in-app, usa el selector de método de 3 bloques (Drag & drop / editor HTML / Usar plantilla) en cada pestaña. Las pestañas de SMS y push aceptan directamente el cuerpo de su canal. Las de WhatsApp permiten asignar una plantilla distinta por variante.
Paso 3: Define la asignación de pesos
La tarjeta Asignación A/B bajo las pestañas tiene un campo con sufijo % por variante. El peso total de todas las variantes debe sumar 100%.
Variante A: 50%
Variante B: 50%
O repartido entre más variantes:
Variante A: 33%
Variante B: 33%
Variante C: 34%
Si has añadido un grupo de control, su peso permanece fijo cuando añades o quitas variantes de mensaje: solo se reequilibran las variantes que no son de control sobre el presupuesto restante. Si eliminas todas las variantes de mensaje, el control se mantiene y el validador de Peso total muestra la diferencia hasta que añadas una variante de nuevo.
Paso 4: Elige la regla de parada y el método de optimización
La tarjeta A/B también ofrece:
- Preajuste de regla de parada -
Rápido(límite de 4 h),Estándar(límite de 24 h) oPersonalizado. Ambos preajustes integrados se detienen antes si hay significancia estadística. - Método de optimización - bloqueado con una etiqueta "Necesita 2+ variantes" hasta que añadas una segunda. Bajar de dos variantes restablece el método a
ninguno.
Elegir el método de optimización
| Método | Qué hace | Cuándo usarlo |
|---|---|---|
| Sin optimización | A/B simple: reparto uniforme, tú lees los resultados | Quieres comparar variantes y decidir manualmente |
| Variante ganadora | Prueba con una porción y luego envía automáticamente la mejor a todos | Un envío único en el que quieres que se elija al ganador por ti |
| Variante personalizada | La IA elige la mejor variante por usuario según su historial | Campañas recurrentes o contenido reutilizado: personaliza por persona, no un único ganador global |
Sobre la Variante personalizada (arranque en frío / calentamiento): la IA aprende de los resultados, y los resultados tardan en llegar (horas para los clics, días para las conversiones). Por eso un conjunto de variantes totalmente nuevo no se personaliza en el primer envío: funciona como un A/B normal (reparto uniforme más un grupo de reserva aleatorio para medir el incremento) y se personaliza automáticamente a medida que se acumulan resultados. Esto lo hace idóneo para campañas recurrentes y ofertas reutilizadas (el modelo ya está caliente); un envío único de variantes nuevas será simplemente un A/B estándar que siembra el aprendizaje futuro. La campaña muestra una nota de "la personalización se está calentando" hasta que el modelo haya aprendido sus variantes.
Paso 5: Elige la métrica ganadora
Selecciona qué métrica determina al ganador:
- Tasa de apertura (email, WhatsApp y Viber, los únicos canales que informan de una lectura) - % de personas que abrieron el mensaje
- Tasa de clics (todos los canales salvo webhook, que no tiene a nadie que haga clic) - % de personas que hicieron clic en cualquier enlace
- Tasa de conversión - % de personas que completaron el evento objetivo
- Ingresos - ingresos totales generados (requiere seguimiento de conversiones)
Paso 6: Duración de la prueba
Los preajustes Rápido / Estándar traen límites razonables (4 h y 24 h respectivamente), contados desde que salen los envíos de prueba - no desde que configuras la campaña, así que una prueba programada para más tarde conserva su ventana completa. Para pruebas más largas, usa Personalizado y define tu propio límite y tamaño mínimo de muestra.
Paso 7: Publica
Pulsa Publicar en la cabecera del asistente. El motor A/B asigna variantes mediante hashing determinista (hash(userId + campaignId)), así que el mismo usuario ve siempre la misma variante en los reenvíos.
Disponibilidad de A/B por canal
La tarjeta A/B aparece en todos los canales basados en variantes: email, SMS, WhatsApp, webhook, push, in-app. Antes push guardaba un único cuerpo a nivel de campaña; las campañas push heredadas se convierten en una única variante Main al editarlas, que es lo que permite hacer pruebas A/B de push ahora.
Ejemplos de pruebas A/B
Ejemplo 1: Prueba de asunto (email)
Objetivo: mejorar la tasa de apertura
Configuración:
- Variante A: "Tu boletín mensual"
- Variante B: "5 consejos para ser más productivo"
- Tráfico: 50% / 50%
- Métrica ganadora: tasa de apertura
- Duración: 24 horas
Resultados:
- Variante A: 15% de aperturas
- Variante B: 28% de aperturas ← Ganadora
Conclusión: el emoji y una propuesta de valor concreta funcionan mejor
Ejemplo 2: Prueba de llamada a la acción
Objetivo: mejorar la tasa de clics
Configuración:
- Variante A: botón "Saber más"
- Variante B: botón "Empezar gratis"
- Variante C: botón "Probar ahora"
- Tráfico: 33% / 33% / 34%
- Métrica ganadora: tasa de clics
- Duración: 48 horas
Resultados:
- Variante A: 5,2% CTR
- Variante B: 8,7% CTR ← Ganadora
- Variante C: 6,1% CTR
Conclusión: destacar "gratis" aumenta los clics
Ejemplo 3: Prueba de longitud del contenido
Objetivo: mejorar la tasa de conversión
Configuración:
- Variante A: texto largo (500 palabras)
- Variante B: texto corto (100 palabras)
- Tráfico: 50% / 50%
- Métrica ganadora: tasa de conversión
- Duración: 7 días
Resultados:
- Variante A: 2,1% de conversión
- Variante B: 3,8% de conversión ← Ganadora
Conclusión: para esta audiencia, el mensaje conciso convierte mejor
Ejemplo 4: Prueba de horario (SMS)
Objetivo: optimizar el momento de interacción
Configuración:
- Variante A: enviar a las 9:00
- Variante B: enviar a las 14:00
- Variante C: enviar a las 18:00
- Tráfico: 33% / 33% / 34%
- Métrica ganadora: tasa de clics
- Duración: el mismo día
Resultados:
- Variante A (9:00): 12% CTR
- Variante B (14:00): 8% CTR
- Variante C (18:00): 18% CTR ← Ganadora
Conclusión: para esta audiencia, los mensajes de tarde funcionan mejor
Analizar los resultados
Ver los resultados de la prueba
- Ve a Campañas
- Haz clic en tu campaña con prueba A/B
- Abre la pestaña Variantes
Métricas mostradas
Para cada variante:
Campañas de email:
- Número de envíos
- % entregados
- % de aperturas
- % de clics
- % de conversión
- Ingresos (si hay seguimiento)
Campañas de SMS:
- Número de envíos
- % entregados
- % de clics
- % de conversión
- % de respuestas
Campañas push:
- Número de envíos
- % entregados
- % de clics (tocar la notificación es un clic: push no tiene una apertura que medir)
- % de conversión
Significancia estadística
Joryio calcula automáticamente la significancia estadística con una prueba z de dos proporciones e intervalos de confianza de Wilson:
- Los intervalos de confianza bajo cada tasa muestran el rango donde probablemente se encuentra la tasa real
- Las etiquetas de significancia indican si las diferencias son reales o aleatorias:
- Verde
+12,5%- significativamente mejor - Rojo
-5,2%- significativamente peor - Gris
p=0,234- todavía no es significativo
- Verde
- Las etiquetas Líder/Ganadora resaltan la variante con mejor rendimiento y la declarada ganadora
Para resultados fiables, cada variante debería tener al menos:
- 1.000 destinatarios en pruebas de tasa de apertura o de clics
- 100 conversiones en pruebas de tasa de conversión
Para todos los detalles sobre intervalos de confianza, valores p y detección automática de ganador, consulta Significancia estadística.
Declarar un ganador
Declaración manual
- Revisa el rendimiento de las variantes
- Pulsa Declarar ganador
- Selecciona la variante ganadora
- Opcionalmente: envía la ganadora al resto de la audiencia
Declaración automática
Si está activada, Joryio automáticamente:
- Espera a que transcurra la duración de la prueba
- Calcula la significancia estadística
- Declara ganador si la confianza supera el 95%
- Envía la ganadora al resto de la audiencia (si está configurado)
Sin un ganador claro
Si las variantes rinden de forma parecida:
- Continúa con cualquiera de las dos
- Ejecuta una prueba más larga
- Prueba algo distinto
Buenas prácticas
1. Prueba una sola variable
Prueba solo un elemento cada vez:
Bien: probar solo el asunto
Variante A: "Consigue un 20% de descuento"
Variante B: "Ahorra a lo grande hoy"
Mismo contenido, mismo CTA
Mal: probarlo todo
Variante A: asunto, contenido y CTA distintos
Variante B: asunto, contenido y CTA distintos
¡No puedes saber qué marcó la diferencia!
2. Usa un tamaño de muestra suficiente
Asegura resultados con sentido:
Bien: 10.000 destinatarios = 5.000 por variante Mal: 200 destinatarios = 100 por variante (demasiado pocos)
Mínimo recomendado:
- Tasa de apertura de email: 1.000 por variante
- Tasa de clics: 500 por variante
- Tasa de conversión: 100 conversiones por variante
3. Deja correr la prueba el tiempo suficiente
Ten en cuenta las variaciones por día de la semana y hora del día:
Bien: dejarla entre 3 y 7 días Mal: declarar ganador a las 2 horas
Duración recomendada:
- Email: 24-72 horas
- SMS: 4-12 horas
- Push: 6-24 horas
- Basadas en conversión: 7 días
4. Prueba diferencias con sentido
Haz que las variantes se diferencien lo suficiente:
Bien:
Variante A: "Ahorra 10 €"
Variante B: "Consigue un 50% de descuento"
(Claramente distintas)
Mal:
Variante A: "Ahorra hoy"
Variante B: "Ahorra ya"
(Demasiado parecidas)
5. Documenta lo aprendido
Lleva un registro de los resultados:
Prueba: asunto - con emoji frente a sin emoji
Fecha: 15 de enero de 2024
Ganadora: con emoji (28% frente a 15% de aperturas)
Conclusión: el emoji sube la tasa de apertura un 87%
Acción: incluir un emoji relevante en los próximos emails
Errores habituales en pruebas A/B
1. Probar demasiadas variantes
Evita: 5 o más variantes con una audiencia pequeña Haz: 2-3 variantes con tráfico suficiente en cada una
2. Detener las pruebas demasiado pronto
Evita: declarar ganador tras unas pocas horas Haz: esperar a que haya significancia estadística
3. Probarlo todo a la vez
Evita: cambiar asunto, contenido, CTA y horario simultáneamente Haz: probar una variable cada vez
4. Ignorar las diferencias entre segmentos
Evita: dar por hecho que los resultados valen para todos los segmentos Haz: probar dentro de segmentos concretos
5. No aplicar lo aprendido
Evita: hacer pruebas y no usar las conclusiones Haz: aplicar las tácticas ganadoras a futuras campañas
Pruebas A/B avanzadas
Pruebas secuenciales
Prueba por etapas:
Etapa 1: probar asuntos (ganador: asunto con emoji)
↓
Etapa 2: probar botones CTA (ganador: "Empezar prueba gratis")
↓
Etapa 3: probar longitud del contenido (ganador: texto corto)
↓
Campaña final: combinar todos los ganadores
Pruebas por segmento
Prueba dentro de segmentos:
Prueba 1: usuarios de prueba gratuita
- Variante A: destacar funcionalidades
- Variante B: destacar precio
Ganadora: la centrada en el precio
Prueba 2: usuarios de pago
- Variante A: destacar funcionalidades ← Ganadora
- Variante B: destacar precio
Ganadora: la centrada en funcionalidades
¡Conclusión: mensajes distintos para segmentos distintos!
Pruebas multivariante
Prueba varios elementos a la vez (requiere una audiencia mayor):
Prueba combinaciones de:
- Asunto (A o B)
- CTA (X o Y)
Resulta en 4 variantes:
1. Asunto A + CTA X
2. Asunto A + CTA Y
3. Asunto B + CTA X
4. Asunto B + CTA Y
Las pruebas multivariante reparten el tráfico entre muchas variantes. Necesitas una audiencia 10 veces mayor que en una prueba A/B simple.
Seguimiento de conversiones
Para probar tasas de conversión, configura eventos de conversión:
- Ve a los ajustes de la campaña
- Activa el Seguimiento de conversiones
- Selecciona el evento de conversión:
- "Pedido completado"
- "Prueba iniciada"
- "Formulario enviado"
- Define la ventana de atribución (por ejemplo, 7 días)
Joryio registrará qué variante genera más conversiones.
Siguientes pasos
- Significancia estadística y ganador automático - intervalos de confianza, valores p y detección automática de ganador
- Crea tu primera campaña
- Buenas prácticas en campañas de email
- Analítica de campañas
- Configurar el seguimiento de conversiones