Variantes y grupo de control

Las variantes de recorrido completo te permiten probar mediante A/B/n recorridos enteros entre sí; un grupo de control retiene una parte de tu audiencia para que puedas medir cuánto aumentan realmente las conversiones, no solo cuántas personas convirtieron.

Esto es distinto del nodo de experimento, que divide un flujo posterior a mitad del recorrido. Las variantes se dividen en la entrada: hay un único desencadenante compartido y, desde él, el recorrido se abre en una rama por variante.

Cuándo usar cada opción

Lo que quieres probar	Usa
Dos recorridos estructuralmente distintos entre sí - una serie de 3 emails frente a un único recordatorio por WhatsApp -	Variantes de recorrido
Un paso dentro de un recorrido por lo demás idéntico - asunto A frente a B en el segundo email -	Nodo de experimento
Si vale la pena ejecutar el recorrido - impacto incremental frente a no hacer nada -	Grupo de control

Puedes combinarlas: un recorrido con variantes puede incluir nodos de experimento más adelante en el flujo de una variante.

Cómo funcionan las variantes

• Hay un único desencadenante compartido - la entrada normal del recorrido - . La división ocurre allí; no añades un desencadenante por variante. Después de guardar, el nodo de desencadenante muestra una salida por variante de tratamiento, con el nombre de la variante y su % de tráfico. Conecta cada salida al primer nodo del flujo de esa variante. Si hay un grupo de control, el desencadenante también muestra una fila discontinua Retenida con su porcentaje, sin salida.
• Cada persona que entra se asigna a una sola variante de forma determinista. La asignación es un hash estable de la persona y el recorrido, por lo que siempre acaba en la misma variante del mismo recorrido. Entrar dos veces nunca mueve a nadie entre ramas a mitad de la prueba.
• Los porcentajes de todas las variantes, incluido el grupo de control, deben sumar 100 %. Normalmente no los defines a mano: el editor reparte automáticamente el tráfico al añadir o eliminar variantes y no permite guardar hasta que la suma sea 100.
• La asignación ocurre una vez, en la entrada. Las personas que ya recorren el flujo quedan fijadas a la variante con la que entraron; editar después la distribución solo afecta a quienes entren más tarde.

Si una variante aún no está conectada

Cada variante de tratamiento debe tener la salida de su desencadenante conectada a un flujo. Si su salida aún no está conectada a una rama específica, las personas asignadas a ella usan como alternativa la primera rama normal del recorrido en lugar de perderse; así, una prueba configurada a medias falla de forma segura. Aun así, conecta todas las variantes antes de activarlas: una variante sin conectar mide silenciosamente el mismo flujo que la rama predeterminada, lo cual no aporta información.

Crear variantes

1. Crea el recorrido con su único desencadenante, como siempre.
2. Abre Variantes desde la barra de herramientas del recorrido. Todo recorrido empieza como una única variante A al 100 %: hasta que lo dividas, el recorrido completo es la variante A.
3. Haz clic en Añadir variante para dividirlo. Cada nuevo tratamiento recibe automáticamente el nombre Variante A, Variante B, etc., y los porcentajes se redistribuyen de forma uniforme: dos variantes pasan a 50/50; tres, a 34/33/33, y así sucesivamente. Puedes sobrescribir cualquier valor en su campo %; el Total de abajo debe llegar a 100 %.
4. De forma opcional, haz clic en Añadir grupo de control para incluir una retención. Empieza en 20 % y los tratamientos se reparten el 80 % restante. Un recorrido puede tener como máximo un grupo de control; el botón desaparece cuando ya existe uno.
5. Guarda. No puedes guardar mientras los porcentajes no sumen 100 %. El desencadenante siempre muestra al menos la Variante A y, en el primer guardado, el flujo existente del recorrido se conecta automáticamente a su salida; no necesitas volver a conectar la base.
6. El nodo de desencadenante muestra ahora una salida por variante, cada una con su %. Arrastra desde cada salida al primer nodo del flujo de esa variante en el Canvas. El grupo de control no tiene salida porque, por diseño, no tiene flujo.

Puedes eliminar una variante desde el mismo modal en cualquier momento; los porcentajes restantes se reequilibran automáticamente hasta 100 %. No se puede eliminar el último tratamiento: un recorrido siempre conserva al menos una variante.

Duplicar una variante

Probar un ajuste de una variante existente - el mismo flujo, con un mensaje o una espera diferente - se configura mucho más rápido copiando la variante ya creada que conectando una nueva desde cero.

En el modal Variantes, cada fila de tratamiento incluye el icono Clonar. Al hacer clic en él:

• añade una variante con el nombre de origen y el sufijo «(copia)», y los porcentajes se redistribuyen igual que con Añadir variante;
• al Guardar, duplica todo el flujo posterior de esa variante - todos los nodos accesibles desde la salida de su desencadenante y sus conexiones - y conecta las copias a la salida del desencadenante de la nueva variante.

Los nodos copiados se desplazan en el Canvas para que no queden encima de los originales. Arrástralos donde quieras y edita el paso que deseabas cambiar. Como la copia solo se materializa al Guardar, si pulsas Cancelar, se descartan tanto la variante nueva como sus nodos copiados: no queda nada. Los grupos de control no tienen flujo, así que no incluyen la acción Clonar.

Definir la distribución de tráfico

El editor mantiene la distribución en 100 % incluso al añadir o eliminar, pero siempre puedes escribir valores exactos. Algunas pautas prácticas:

• Las distribuciones uniformes llegan antes a una conclusión. En una prueba con dos variantes, 50/50 - o 45/45/10 con grupo de control - acumula evidencia para ambas ramas al mismo ritmo.
• Los grupos de control suelen ser del 5 al 20 %. Son suficientemente grandes para comparar y lo bastante pequeños para no retener el recorrido a una gran parte de tu audiencia. Los recorridos con mucho tráfico pueden usar retenciones menores.
• Evita porcentajes minúsculos. Una variante de tratamiento del 5 % en un recorrido con poco tráfico puede tardar meses en dar una conclusión.

Como la asignación es determinista por persona, cambiar la distribución desplaza los límites entre ramas: las nuevas entradas siguen los porcentajes nuevos, mientras que quienes ya estaban inscritos conservan la variante con la que entraron.

Grupo de control

Un grupo de control es una variante que se retiene: las personas asignadas a ella cuentan como entradas, pero no reciben nada. Nunca entran al flujo: no hay mensajes, esperas ni efectos secundarios. Comparar lo que hace la audiencia tratada con esta base de «no hacer nada» es la única forma de conocer el impacto incremental real del recorrido.

Para añadirlo, abre Variantes y haz clic en Añadir grupo de control; después asígnale un porcentaje, por ejemplo 10 %. No tiene salida de desencadenante ni flujo: es una retención pura, marcada como Retenida en la lista de variantes.

Bajo el capó, el grupo de control es simplemente una variante con la marca control, por lo que vive en el mismo editor Variantes que todo lo demás: un solo lugar para A/B/n y retenciones. Cuando una persona entra en el grupo de control, Joryio aun así:

• la cuenta en las entradas totales del recorrido y, por separado, en las entradas de control;
• registra para ella un evento marcador de rama de control, de forma que sus compras posteriores puedan compararse con la misma ventana de conversión de la audiencia tratada.

Ese registro es lo que hace que la retención sea medible y no solo una omisión.

Cómo aparecen las cifras

Un recorrido con variantes informa de sus entradas en dos contadores:

• Entradas totales: todas las personas que entraron al recorrido, incluidas las retenidas en el grupo de control.
• Entradas de control: el subconjunto retenido, contado por separado.

La audiencia tratada son todas las personas de las entradas totales que no están en las entradas de control. Tenlo en cuenta al observar los envíos: por diseño, un recorrido con un grupo de control del 10 % siempre mostrará aproximadamente un 10 % menos de envíos que de entradas.

Interpretar el indicador de incremento

Cuando un recorrido tiene grupo de control, su vista de analítica muestra un indicador de incremento frente al control junto a la cifra de ingresos. Compara los ingresos por destinatario dentro de la ventana entre la audiencia tratada y el control retenido, e informa del aumento relativo o de los ingresos incrementales cuando el control no compró nada. Un número negativo se muestra tal cual: significa que, durante esa ventana, el recorrido rindió peor que no hacer nada.

Cómo interpretarlo:

• Incremento positivo: el recorrido genera ingresos que no se habrían producido por sí solos. Esta es la cifra que debes comunicar, no los ingresos atribuidos sin ajustar.
• Aproximadamente cero: las «conversiones» del recorrido son sobre todo compras que habrían ocurrido de todos modos. Considera cambiar la oferta, el momento o la audiencia.
• Incremento negativo: el grupo tratado obtuvo un resultado peor que la retención. Es raro, pero real: enviar demasiados mensajes puede reducir las compras. Investiga antes de ampliar.

El indicador se completa cuando hay tráfico real: envíos tratados, entradas de control y compras dentro de la ventana de conversión. Hasta que existan los tres, permanece vacío en vez de mostrar una cifra temprana engañosa. La correspondencia de ingresos usa el mismo motor de atribución de ingresos que el resto de la analítica, de modo que las ramas tratada y de control se miden de forma idéntica.

Cuándo sacar una conclusión

Resiste la tentación de declarar un ganador después de una primera tarde prometedora. Aquí se aplican las mismas estadísticas que rigen las pruebas A/B de campañas. Consulta significación estadística para entender cómo funcionan los intervalos de confianza y las pruebas de significación en Joryio.

Orientación práctica:

• Ejecuta al menos un ciclo de negocio completo - normalmente una semana o más - para que el comportamiento entre semana y fin de semana esté representado en cada rama.
• Decide la métrica antes de empezar: ingresos por entrada, tasa de conversión o un evento de conversión principal; evalúa solo con ella.
• No mires y detengas la prueba. Revisar a diario está bien, pero detenerse cuando una rama se adelanta apenas casi garantiza falsos ganadores. Espera a que la diferencia sea estable y el número de entradas sea significativo.
• Concluye reequilibrando. Cuando tengas un veredicto, abre Variantes y dirige las nuevas entradas a la ganadora: establécela en 100 % y elimina las perdedoras, o mantén un grupo de control pequeño de forma permanente para seguir midiendo la incrementalidad.

Ejemplo: probar un nuevo recorrido de bienvenida

Supón que tu recorrido de bienvenida convierte bien y quieres saber si añadir un punto de contacto por WhatsApp supera a la versión actual solo de email, y cuánto genera realmente el recorrido.

1. Abre Variantes y clona la variante del flujo actual. Ahora tendrás Actual (A) y Actual (copia), ambas con la serie completa de emails conectada. Renombra la copia como Email+WhatsApp (B) y, en el Canvas, sustituye su email n.º 2 por un mensaje de WhatsApp.
2. De vuelta en Variantes, añade un grupo de control y ajusta la distribución a Actual (A) 45 %, Email+WhatsApp (B) 45 % y control 10 %. Guarda.
3. Conecta la salida A del desencadenante al primer email de la serie anterior y la salida B al primer nodo de la nueva combinación. El control no necesita conexiones.
4. Actívalo y déjalo ejecutarse durante dos semanas completas.
5. Lee los resultados: el indicador de incremento te dice lo que genera el recorrido completo frente a no hacer nada; comparar la conversión y los ingresos de A y B, teniendo en cuenta la significación estadística, te indica qué variante conservar.
6. Concluye: establece la ganadora en 90 % y conserva el control del 10 % si quieres una medición permanente de incrementalidad; o reincorpóralo y establece la ganadora en 100 %.

Preguntas frecuentes

¿Una persona puede acabar en dos variantes del mismo recorrido? No. La asignación es determinista por persona y recorrido: una persona, una variante, siempre.

¿Qué ocurre si elimino el grupo de control a mitad de la prueba? La medición de incremento solo se calcula mientras haya una variante de control configurada, por lo que el indicador deja de actualizarse con datos nuevos. Las personas que ya se habían retenido siguen retenidas para la ejecución en la que entraron. Si quieres una lectura de incrementalidad permanente, mantén activo indefinidamente un grupo de control pequeño.

¿Necesito un grupo de control para ejecutar variantes? No. Las variantes por sí solas permiten A/B/n. El grupo de control solo es necesario si quieres medir el impacto incremental en vez de limitarte a comparar variantes entre sí.

¿Puedo cambiar nombres y porcentajes mientras el recorrido está activo? Sí, desde el mismo modal Variantes. Las personas que ya están en curso conservan la variante asignada; la nueva distribución se aplica a las nuevas entradas.

Variantes personalizadas (ML)

Si quieres que el sistema aprenda qué variante funciona mejor para cada persona en vez de fijar tú la distribución, consulta Variantes personalizadas en el nodo de experimento. Tras una fase de pruebas, entrena un modelo por persona y dirige a cada una hacia la ruta que predice como mejor, con una retención para medir el incremento de ML.