Tests AB
Compara dos o más variantes de una campaña o programa y consulta cuál convierte mejor. Menú: Campañas › Tests AB.
Permiso Tests AB · Edición Growth o Enterprise (funcionalidad «A/B Tests»).
Aquí defines, lanzas y concluyes experimentos y calculas sus resultados. Ningún flujo de participación asigna todavía socios a variantes ni suma impresiones o conversiones por sí solo, así que los contadores solo avanzan si tu equipo técnico los alimenta. No uses el resultado para decidir sin comprobar antes que tiene datos.
Cómo funciona
Un test tiene una campaña o un programa, un periodo y varias variantes. Cada variante lleva un porcentaje de Tráfico y una de ellas es el Control, la versión de referencia.
Por cada variante se cuentan Impresiones (socios que la vieron) y Conversiones. La Tasa de conversión es conversiones entre impresiones. La Mejora sobre Control compara cada variante con el control.
El ganador se declara cuando todas estas condiciones se cumplen:
- El control y la variante candidata superan el Tamaño Mínimo de Muestra.
- La mejor variante convierte más que el control.
- Una prueba estadística de dos proporciones da una diferencia significativa al 5 %.
Listado
| Columna | Qué es |
|---|---|
| Nombre | Nombre del test y, debajo, su hipótesis. |
| Estado | Draft, Running, Paused, Completed o Cancelled (la pantalla los muestra en inglés). |
| Variantes | Número de variantes. |
| Fecha de Inicio / Fecha de Finalización | Periodo del test. |
El menú Acciones de cada fila ofrece:
| Acción | Cuándo sale | Qué hace |
|---|---|---|
| Editar | Siempre | Abre el formulario. |
| Lanzar | Draft o Paused | Pasa a Running. |
| Pausar | Running | Pasa a Paused. |
| Concluir | Running o Paused | Pasa a Completed. |
| Resultados | Running o Completed | Abre Resultados del Experimento. |
| Eliminar | Siempre | Elimina el test. |
Crear / editar
Pulsa Crear Nuevo.
| Campo | Qué es | Notas |
|---|---|---|
| Nombre | Nombre del test. | Obligatorio, hasta 256 caracteres. |
| Programa de Lealtad | Programa al que pertenece. | |
| Hipótesis / Descripción | Qué pruebas y qué esperas. | Hasta 2000 caracteres. |
| Campaña | Campaña del test. | |
| Fecha de Inicio / Fecha de Finalización | Periodo. | |
| Tamaño Mínimo de Muestra | Impresiones mínimas por variante para declarar ganador. | 1 o más. |
| Nivel de Confianza | Valor entre 0 y 1. | Se guarda, pero la significancia se calcula siempre al 5 %. |
| Estado | Estado actual. | Solo al editar. |
| Variantes | Tabla con Nombre de la variante, Tráfico (%) y Control. | Botón Agregar Variante. |
El formulario muestra el Tráfico total y avisa si no suma 100 %. Guardar se desactiva hasta que sume exactamente 100.
Para pulsar Lanzar el test necesita al menos una variante, un tráfico total del 100 % y exactamente un Control. Si no, IncentIA rechaza el lanzamiento y te indica qué falta.
Resultados del experimento
Resultados muestra:
- Impresiones Totales y Total de conversiones.
- Desglose por Variante: Impresiones, Conversiones, Tasa de conversión, Tráfico y Mejora sobre Control.
- Significancia Estadística y Ganador. Hasta que haya datos suficientes verás Aún no hay suficientes datos para alcanzar significancia estadística.
Estados y límites
- Si hay varios tests en marcha sobre la misma campaña, sus resultados se mezclan. Mantén uno solo activo.
- Un control que gana a las variantes no se marca como ganador: solo se destaca una variante que mejora al control.
- Las landings tienen sus propias variantes dentro del Constructor de landings; no son estos tests.
Permisos
| Acción | Permiso (texto UI) | id técnico |
|---|---|---|
| Ver tests y resultados | Tests AB | Pages.Gamification.ABTests |
| Crear | Creando test ab | Pages.Gamification.ABTests.Create |
| Editar, lanzar, pausar y concluir | Editando test ab | Pages.Gamification.ABTests.Edit |
| Eliminar | Eliminando test ab | Pages.Gamification.ABTests.Delete |