Grupos de control explicados
Un grupo de control es una porción de tu audiencia que tratas deliberadamente de otra manera, para tener con qué comparar tus resultados.
Sin él solo sabes qué pasó. Con él sabes qué cambió tu trabajo.
Si envías una campaña y el 4% de la gente compra, ese 4% no es el valor de la campaña. Parte de esa gente iba a comprar de todos modos. Un grupo de control es cómo averiguas cuántos.
La regla única
Hay cuatro grupos de control distintos en Joryio, y la gente suele asumir que funcionan igual. No es así, pero todos siguen una sola regla:
Un grupo de control recibe lo que habría pasado si no hubieras hecho la parte inteligente.
Así que la pregunta siempre es: ¿cuál es la parte inteligente aquí, y cómo se ve "sin ella"? La respuesta cambia, y por eso los cuatro se comportan distinto.
Los cuatro grupos de control
| Dónde | El grupo de control recibe | Responde a |
|---|---|---|
| Grupo de control global | Nada en absoluto, de forma permanente | ¿Todo mi marketing aporta algo? |
| Prueba A/B de campaña | Nada en absoluto, para este envío | ¿Es mejor enviarlo que no enviarlo? |
| Campaña optimizada por IA | Un mensaje elegido al azar | ¿La IA es mejor que elegir cualquier cosa? |
| Experimento de recorrido (Personalizado) | Tu reparto de rutas configurado | ¿Personalizar es mejor que mi propio reparto? |
La etiqueta en la aplicación te dice cuál estás viendo: cada una dice qué recibe ese grupo.
El primero es distinto en naturaleza a los otros tres: no está ligado a ninguna campaña, se aplica a todo lo que envías, y son las mismas personas durante meses. Tiene su propia página - consulta Grupo de control global.
1. Prueba A/B: "Control - sin mensaje"
Qué es. Al crear una prueba A/B puedes añadir un grupo de control junto a tus variantes. Las personas en él no reciben nada.
Ejemplo. Envías un email de recuperación a 10.000 clientes inactivos.
- La variante A va a 4.500 personas
- La variante B va a 4.500 personas
- El control son 1.000 personas que no reciben email
Dos semanas después:
| Grupo | Compraron algo |
|---|---|
| Variante A | 6,0% |
| Variante B | 5,5% |
| Control (sin email) | 4,0% |
Qué aprendes. La variante A ganó a la B, pero más importante: ambas ganaron a no hacer nada. Tu campaña aportó unos 2 puntos porcentuales. Sin el control habrías celebrado un 6% de conversión sin saber que el 4% habría ocurrido igual.
Cuándo usarlo. Siempre que quieras justificar que la campaña exista, sobre todo en envíos recurrentes, ofertas con descuento y todo aquello que la gente podría haber comprado igualmente.
Qué esperar. Tus cifras principales se verán peores con un grupo de control, porque ahora mides tu aportación real en lugar de la actividad total. Ese es justo el objetivo.
El coste. Esas 1.000 personas no reciben nada. Si el mensaje es realmente útil, es un coste real. Mantén el control pequeño (5-10% es lo normal) y no dejes uno en cada campaña para siempre.
2. Campaña optimizada por IA: "% de grupo de control - recibe una elección aleatoria"
Qué es. En una campaña optimizada por IA, la IA decide por persona qué mensaje y qué canal enviar. No hay un reparto que tú configuraras: la IA es todo el asunto.
Por eso "sin la parte inteligente" no significa no enviar nada. Significa elegir algo al azar. Las personas de este grupo de control sí reciben un mensaje, simplemente uno elegido al azar.
Ejemplo. Tienes cuatro ofertas y una campaña optimizada por IA a 20.000 personas, con el control al 10%.
- 18.000 personas reciben la elección de la IA para ellas
- 2.000 personas reciben una de las cuatro ofertas al azar
| Grupo | Compraron algo |
|---|---|
| Elección de la IA | 7,2% |
| Elección aleatoria | 5,9% |
| Aportación de la IA | +1,3 puntos |
Qué aprendes. La IA vale unos 1,3 puntos por encima de elegir a ciegas. Si esas dos cifras fueran iguales, la IA aún no se está ganando el sueldo, normalmente porque no ha visto suficientes resultados de los que aprender.
Cuándo esperar una diferencia. No de inmediato. La IA aprende de resultados, y los resultados tardan: horas para clics, días para compras. Con un conjunto de ofertas nuevo empieza siendo prácticamente aleatoria y mejora conforme llegan datos. Júzgala tras varios envíos, no tras el primero.
Algo que sorprende. Alguien de este grupo de control puede recibir un mensaje distinto en cada envío. Es deliberado: "elegir al azar" significa tirar el dado cada vez. Si recibiera siempre el mismo, no estarías comparando contra la elección aleatoria, sino contra una lista arbitraria fija.
3. Experimento de recorrido, modo Personalizado: "% de grupo de control - mantiene tu reparto"
Qué es. En un recorrido puedes añadir un nodo de Experimento que reparte a la gente por rutas distintas, y tú fijas los porcentajes. Al cambiarlo a Personalizado, un modelo empieza a elegir la ruta por persona e ignora tus porcentajes.
Así que aquí "sin la parte inteligente" significa tu reparto. Las personas de este grupo de control siguen recibiendo los porcentajes que configuraste.
Ejemplo. Un nodo de experimento con tres rutas y tu reparto en 40 / 30 / 30. Modo personalizado activo, control al 20%.
- El 80% recibe la ruta que el modelo elige para cada uno
- El 20% mantiene el 40 / 30 / 30 normal
| Grupo | Completaron el recorrido |
|---|---|
| Elección del modelo | 31% |
| Tu reparto 40/30/30 | 26% |
| Lo que aportó personalizar | +5 puntos |
Qué aprendes. Personalizar está ganando al reparto que habrías ejecutado igualmente. Esa es exactamente la decisión que te importa: no "¿es bueno el modelo en abstracto?", sino "¿es mejor que lo que ya hacía?".
Por qué este grupo mantiene la misma ruta cada vez. Porque tu reparto lo hace. A quien tu 40/30/30 puso en la ruta de descuento, se queda en la ruta de descuento. El control tiene que comportarse como tu reparto, o no estarás comparando contra tu reparto.
Cuándo esperar diferencia. Igual que con la campaña de IA: el modelo necesita resultados. Un experimento nuevo funciona al principio como un reparto normal y personaliza conforme llegan datos. El nodo muestra un aviso de calentamiento hasta entonces.
Qué es un holdback (y qué no)
También verás la palabra holdback en las pruebas A/B. No es un grupo de control y no se compara con nada.
Cuando ejecutas una prueba A/B con selección automática de ganadora:
- La prueba va a una parte de tu lista, digamos el 30%
- Joryio espera y calcula qué variante ganó
- El mensaje ganador va al 70% restante
Ese 70% es el holdback. No están excluidos de nada: están esperando la mejor versión. Todos reciben un mensaje al final.
Forma rápida de distinguirlos: un control es un grupo con el que comparas. Un holdback es un grupo al que envías después.
Elegir el tamaño
Grupo de control más grande = respuesta más fiable, menos audiencia recibiendo tu mejor tratamiento. El equilibrio habitual:
| Tamaño de audiencia | Control sugerido |
|---|---|
| Menos de 5.000 | 15-20% - las audiencias pequeñas necesitan una porción mayor para afirmar algo con confianza |
| 5.000 - 50.000 | 10% |
| Más de 50.000 | 5% |
Dos advertencias prácticas:
- Demasiado pequeño y no aprendes nada. Un control del 2% sobre una lista de 3.000 son 60 personas. Una o dos compras mueven el resultado. Consulta Significancia estadística para ver cómo Joryio decide que un resultado es real.
- No compares entre pruebas distintas. Un grupo de control pertenece a la campaña o al experimento donde se definió. Las cifras del control de una prueba no son la referencia de otra.
Preguntas frecuentes
¿Saben las personas del grupo de control que están en él? No. Simplemente no reciben nada (A/B), o reciben un mensaje normal elegido de otra forma (en los otros dos casos).
¿Son las mismas personas cada vez? La pertenencia es estable, sí, y eso es lo que permite observar al mismo grupo a lo largo del tiempo. En la campaña de IA cambia el mensaje que reciben en cada envío, pero no quién está en el grupo.
¿Puedo mirar los resultados del grupo de control por separado? Sirven sobre todo como comparación, no por sí solos. "El control convirtió al 4%" dice poco; "la campaña superó al control por 2 puntos" es la cifra que merece reportarse.
Mi grupo de control va mejor que mi campaña. ¿Y ahora? Tómatelo en serio: puede pasar y conviene saberlo. Comprueba primero que ambos grupos sean lo bastante grandes para que la diferencia sea real y no ruido. Si se sostiene, el mensaje realmente está rindiendo mal: fatiga, audiencia equivocada u oferta equivocada. Eso es un hallazgo, no un fallo de la prueba.
Si además tengo un grupo de control global, ¿se suman los porcentajes? No, se anidan. Un contacto excluido globalmente queda fuera de la campaña antes de sortear su grupo de control, así que nunca se cuenta dos veces. Con un 10% global y un 20% de control de campaña, 1.000 contactos se reparten en 100 globales, 180 de control de campaña (20% de los 900 restantes) y 720 que reciben la campaña. Es decir, 280 no reciben nada, no 300. Consulta Grupo de control global.
¿Necesito uno en cada campaña? No. Úsalo cuando estés decidiendo algo: si merece la pena la campaña, si la IA compensa, si personalizar supera a tu reparto. En envíos rutinarios donde ya sabes la respuesta, el control es solo una audiencia a la que no enviaste.