Aplicar las ganadoras de las pruebas A/B a sus audiencias

Una prueba A/B suele terminar con una ganadora para todos. Pero la versión que gana en general no siempre es la que gana en los teléfonos, o con los visitantes de Estados Unidos. Pruebas A/B por audiencia muestra las audiencias en las que gana otra versión — y cuando una audiencia tiene una Ganadora clara, puede aplicarla:

• la prueba A/B termina;
• cada versión ganadora se muestra a las audiencias en las que ganó;
• el resto sigue viendo la ganadora general;
• las versiones que no ganaron en ninguna parte se desactivan.

No cambia nada hasta que alguien hace clic en Aplicar, y se puede deshacer.

Vea el recorrido de 1:38: una prueba en la que Weatherproof gana en general, la audiencia de teléfonos en la que Free shipping es una Ganadora clara, cómo aplicarla, la campaña después y Deshacer.

En qué se diferencia de las otras formas en que decide una prueba

• Elegir un ganador (elección automática) promociona una versión para todos.
• El optimizador de IA (“IA: optimizar continuamente”) sigue desplazando el reparto del tráfico para todos y nunca concluye.
• Aplicar las ganadoras por audiencia concluye la prueba por audiencia, después de que usted lo apruebe.

Qué necesita

• Una campaña en vivo que ejecute una prueba A/B con dos o más versiones rotando — no multivariante, no una campaña de página de aterrizaje.
• Descubrimiento de audiencias en la cuenta. Las audiencias son las que encontró, y las sesiones de la prueba se desglosan por ellas una vez al día, a partir del día siguiente a la ejecución de la prueba.
• Datos suficientes por audiencia: al menos 200 sesiones en cada una de las dos versiones comparadas, y 10 conversiones entre ambas.
• Ningún cambio sin publicar pendiente en staging para esa campaña.

Leer Pruebas A/B por audiencia

Abra Audiencias → Pruebas A/B por audiencia y elija la prueba (o abra …/ab-audiences?campaign=<id>). Se aplica el periodo del informe de la barra superior.

• Métrica: Tasa de compra, Tasa de conversión, Tasa de clics (incluidos los envíos de formularios) u Objetivo de esta campaña cuando tiene uno. El valor predeterminado sigue a los datos: el objetivo de la campaña, después las compras y después cualquier objetivo. Solo concluyentes oculta las filas que no son concluyentes.
• El encabezado: la tasa general de cada versión, la líder marcada como “lidera en general” y un resumen como “3 audiencias con tráfico suficiente · 2 discrepan del líder general, 1 de ellas de forma concluyente”.
• La tabla, una fila por audiencia: Visitas (su parte de la prueba), la tasa de cada versión con conversiones / sesiones, Líder en esta audiencia (“igual que en general” o “no es el líder general”) y Confianza.

Cómo leer las cifras: Descubrimiento de audiencias, en la página Métricas de rendimiento, explica cada cifra de esta pantalla y cómo leerla.

Qué hace que haya una Ganadora clara

Del panel: “Concluyente tras la corrección por el número de audiencias analizadas, por delante en ambas mitades de los días y con sesiones y conversiones suficientes para que signifique algo.” En pocas palabras:

• La corrección. Con muchas audiencias, algunas parecen ganadoras por suerte, así que el listón sube con el número de audiencias comprobadas (una corrección de la tasa de falsos descubrimientos), con el propio ajuste de significancia de la prueba — el 95% salvo que se cambie.
• Ambas mitades. Los días del periodo se dividen en dos mitades alternas (días impares y pares), de modo que cada mitad abarca todo el periodo, y la líder debe ir por delante en ambas.
• Datos suficientes — como arriba.
• Una ganadora distinta — la líder de la audiencia debe ser distinta de la líder general.

Aplicar, paso a paso

1. Marque las audiencias que quiera: cada fila con una Ganadora clara tiene una casilla Aplicar esta ganadora (hasta 10 audiencias por campaña).
2. El botón de encima de la tabla dice Marca las audiencias que quieres aplicar hasta que marca una, y después Aplicar a 1 audiencia… — el número sigue a la selección.
3. Haga clic en él. La confirmación, ¿Aplicar las ganadoras a sus audiencias?, enumera exactamente lo que ocurrirá.
4. Haga clic en Aplicar a 1 audiencia. Personyze vuelve a comprobar el veredicto en el servidor antes de escribir nada; si los datos ya no lo respaldan, no cambia nada.

Cuando la campaña tiene un grupo de control, la confirmación también puede decir que a algunas audiencias “No se les mostrará nada, porque las ganó el grupo de control” — o que “Al resto no se le muestra nada, porque el grupo de control ganó en general.”

Qué cambia, y dónde verlo

• En el informe, un banner verde: Ganadoras aplicadas a sus audiencias, con la fecha y quién lo aplicó, “La prueba A/B ha concluido. Cada una de estas audiencias ve la variación que ganó en ella, y el resto ve la ganadora general.”, cada audiencia con su versión, Resultados desde entonces → y Deshacer.

• En el paso Contenido de la campaña, la franja A/B dice “Sin prueba — todo el que coincida con esta campaña ve el mismo contenido.”, y la campaña pasa a una versión nueva firmada por Optimizador de Personyze. Cada tarjeta que se conserva indica quién la ve, en morado bajo su línea de tipo: Se muestra a: Device type is phone en la ganadora de la audiencia, Todos excepto: Device type is phone en la ganadora general. Ambas llevan la etiqueta Auto-optimized. Una versión que no ganó en ninguna audiencia muestra el estado Desactivada.

• Dentro de una acción, su sección Restringir a (“Limita esta acción a páginas concretas.”) muestra el grupo de páginas que creó el optimizador, con el nombre de la audiencia (por ejemplo Shown to: Device type is phone), con Editar. Ese grupo de páginas pertenece a la acción; no se ofrece a otras acciones.
• En Rendimiento, el botón de periodo Desde que se aplicaron las ganadoras muestra los resultados posteriores al cambio.

Deshacer

Haga clic en Deshacer en el banner y confirme: “Deshacer deja la prueba como estaba: las variaciones vuelven a rotar y se eliminan los grupos de páginas de las audiencias.” Deshacer está disponible hasta que se vuelve a editar la campaña. Una campaña admite una sola aplicación a la vez, así que para añadir otra audiencia más adelante, deshaga primero y después vuelva a aplicar con todas las audiencias marcadas.

No veo el botón Aplicar

• Lo más habitual es que ninguna fila tenga una Ganadora clara: pruebe un periodo más largo, otra métrica, o espere a que llegue tráfico.
• “Aún no hay cortes por audiencia para esta prueba en el periodo elegido.” El Descubrimiento de audiencias está desactivado, la prueba es demasiado reciente (los cortes empiezan el día siguiente a su ejecución) o el periodo no la incluye.
• “Ninguna audiencia tiene 20 visitas en esta prueba en el periodo.” Espere a que llegue tráfico, o amplíe el periodo.
• Cuando la campaña no admite una aplicación, una barra ámbar lo indica — “1 audiencia tiene una ganadora clara, pero aquí no se puede aplicar.” — seguido del motivo:
  • Las ganadoras no se pueden aplicar por audiencia en una campaña de página de aterrizaje
  • Esta campaña tiene cambios pendientes en staging: publícalos o descártalos primero
  • Esta campaña no tiene ninguna prueba A/B en curso
  • Las ganadoras ya se aplicaron a esta campaña
  • Esta campaña ejecuta una prueba multivariante: las ganadoras solo se pueden aplicar por audiencia en una prueba A/B
  • Campaign … is not live, so it has no test to conclude

Preguntas

• ¿Es automático? No. Una persona hace clic en Aplicar, y el servidor lo vuelve a comprobar en ese momento.
• ¿Qué cifras deciden? La métrica y el periodo del informe en el momento en que hace clic en Aplicar; se guardan con la aplicación.
• ¿Un visitante en dos audiencias? Ve la ganadora del resultado más fuerte.
• ¿Se conserva el historial? Sí. La versión con la que funcionaba la prueba se queda en el historial de la campaña.

Desde la activación hasta la aplicación: lo que ve en cada etapa

Relacionado

• Pruebas A/B — cómo ejecutar la prueba en primer lugar.
• Descubrimiento de audiencias — de dónde salen las audiencias.
• Audiencias y segmentación