Recorridos de experimentos
Las rutas de experimentación le permiten probar varias rutas de Canvas entre sí y con un grupo de control en cualquier punto del recorrido del usuario. Con este componente, puedes hacer un seguimiento del rendimiento de la ruta para tomar decisiones informadas sobre tu recorrido en Canvas.
Cuando incluyas un paso de ruta de experimentos en tu recorrido de usuario, asignará aleatoriamente a los usuarios a las diferentes rutas (o a un grupo de control opcional) que crees. Porciones de la audiencia se asignarán a diferentes rutas según los porcentajes que selecciones, lo que te permitirá probar diferentes mensajes o rutas entre sí y determinar cuál es más eficaz.
Ejemplos
Las rutas de experimentación son las más adecuadas para probar la entrega, la cadencia, el texto del mensaje y las combinaciones de canales.
- Entrega: Comparar los resultados entre mensajes enviados con diferentes retardos, en función de las acciones de los usuarios(Action Paths), y utilizando la Temporización Inteligente.
- Cadencia: Pruebe varios flujos de mensajería durante un periodo determinado. Por ejemplo, podrías probar dos cadencias de incorporación diferentes:
- Cadencia 1: Enviar 2 mensajes en las 2 primeras semanas del usuario
- Cadencia 2: Enviar 3 mensajes en las 2 primeras semanas del usuario
Cuando te dirijas a usuarios rezagados, puedes probar la eficacia de enviar dos mensajes de recuperación en una semana frente a enviar solo uno.
- Copia del mensaje: De forma similar a una prueba A/B estándar, puede probar diferentes textos de mensajes para ver qué redacción da lugar a una mayor tasa de conversión.
- Combinaciones de canales: Probar la eficacia de distintas combinaciones de canales de mensajes. Por ejemplo, puede comparar el impacto de utilizar sólo un correo electrónico frente a un correo electrónico combinado con un push.
Requisito previo
Para utilizar rutas de experimentos, tu Canvas debe incluir eventos de conversión. Aunque no puedes añadir eventos de conversión después de haber lanzado un Canvas, puedes clonar el Canvas lanzado y añadir eventos de conversión para añadir Rutas de experimentos.
Creación de una ruta de experimentos
Para crear un componente de Rutas de Experimento, primero añada un paso a su Lienzo. Arrastre y suelte el componente desde la barra lateral, o haga clic en el botón más en la parte inferior de un paso y seleccione Rutas de experimentación.
En la configuración por defecto de este componente, hay dos rutas por defecto, Ruta 1 y Ruta 2, con el 50% de la audiencia siendo enviada por cada ruta. Haga clic en el componente para ampliar el panel Configuración del experimento, y verá las opciones de configuración del componente.
Paso 1: Elija el número de vías y la distribución de la audiencia
Puede añadir hasta cuatro rutas haciendo clic en Añadir ruta y un grupo de control opcional marcando Añadir un grupo de control. Utilizando las casillas de porcentaje para cada ruta, puede especificar el porcentaje de la audiencia que debe ir a cada ruta y al grupo de control. Los porcentajes indicados deben sumar 100% para poder continuar. Si desea ajustar rápidamente todas las rutas disponibles (y el control) al mismo porcentaje, haga clic en Distribuir rutas uniformemente.
También puede elegir si los usuarios del grupo de control deben continuar por el Canvas o salir después de la ventana de seguimiento de conversiones para el Comportamiento del grupo de control. Opcionalmente, puede añadir una descripción para explicar a los demás lo que esta ruta de experimento pretende probar o incluir información adicional que podría ser útil tener en cuenta.
Si se activa la reelegibilidad del Canvas, los usuarios que entren en el Canvas y recorran un camino elegido al azar volverán a recorrer el mismo camino si se convierten en reelegibles y vuelven a entrar en el Canvas. Esto mantiene la validez del experimento y de los análisis asociados. Si desea que el paso asigne siempre de forma aleatoria las rutas, seleccione Rutas aleatorias en Rutas del experimento. Esta opción no está disponible cuando se utilizan Rutas Ganadoras o Rutas Personalizadas.
Paso 2: Activar Trayectoria ganadora o Trayectorias personalizadas (opcional)
Puede optar por optimizar su experimento activando Trayectoria ganadora o Trayectorias personalizadas. Ambas opciones funcionan probando inicialmente tus rutas con una parte de tu audiencia. Una vez finalizado el experimento, los usuarios restantes y siguientes son enviados por la ruta de mejor rendimiento global (Ruta Ganadora) o por la ruta de mejor rendimiento para cada usuario (Rutas Personalizadas).
Paso 3: Crear rutas
Por último, debes construir tus rutas descendentes. Seleccione Hecho y vuelva al Canvas Builder. Haga clic en el botón más debajo de cada trayecto para empezar a crear trayectos utilizando las herramientas habituales del lienzo según le convenga, e inicie el lienzo cuando esté listo.
Tenga en cuenta que las rutas y sus pasos descendentes no pueden eliminarse de un lienzo una vez creados. Sin embargo, cuando se lanza, puedes modificar la distribución de la audiencia entre las rutas según te convenga. Por ejemplo, si un día después de lanzar un Canvas, llega a la conclusión de que una ruta es superior al resto basándose en los análisis, puede establecer esa ruta al 100% y las demás al 0%. O, según tus necesidades, puedes seguir enviando a los usuarios por varias rutas.
Para evitar la contaminación del experimento, si tu Canvas tiene un experimento de ruta ganadora o ruta personalizada activo o en curso y actualizas el Canvas activo, independientemente de si actualizas el paso de la ruta de experimentos en sí, el experimento en curso finalizará y el paso del experimento no determinará una ruta ganadora ni rutas personalizadas. Para reiniciar el experimento, puedes desconectar la ruta de experimentos existente e iniciar una nueva, o duplicar el Canvas y crear uno nuevo. De lo contrario, los usuarios seguirán la ruta de experimentos como si no se hubiera seleccionado ningún método de optimización. Tampoco puede activar Rutas Personalizadas o Rutas Ganadoras para un Lienzo ya activo con un paso de Ruta de Experimento.
Para más información, consulta Editar Canvas después del lanzamiento.
Seguimiento del rendimiento
En la página Canvas Analytics, selecciona la ruta de experimentos para abrir una tabla detallada idéntica a la pestaña Analizar variantes y comparar estadísticas detalladas de rendimiento y conversión entre las distintas rutas. También puede exportar la tabla mediante CSV y comparar los cambios porcentuales de las métricas de interés en relación con la ruta o el control que seleccione.
Cada paso de cada ruta muestra estadísticas en la vista de análisis de Canvas, al igual que cualquier paso en Canvas. Sin embargo, ten en cuenta que el análisis de pasos individuales y el análisis de rutas de experimentos miden las conversiones de forma diferente:
- El análisis de la ruta de experimentos realiza el seguimiento de las conversiones desde el momento en que el usuario entra en el paso de la ruta de experimentos. Esta es la vista recomendada para comparar el rendimiento entre rutas, ya que todas las rutas comparten el mismo punto de partida.
- Los análisis de pasos individuales (como los análisis de pasos de mensajes) realizan el seguimiento de las conversiones desde el momento en que el usuario recibe ese paso específico (por ejemplo, cuando se envía el mensaje).
Dado que estas ventanas de conversión tienen diferentes puntos de partida, pueden mostrar diferentes tasas de conversión para la misma ruta, especialmente cuando hay retrasos entre el paso del experimento y un mensaje posterior. Para obtener la comparación más fiable entre rutas, utiliza el análisis de rutas de experimentos.
Rendimiento de la Ruta ganadora y las Rutas personalizadas
Aprovecha las Rutas ganadoras para hacer un seguimiento del rendimiento durante un período de tiempo y luego enviar automáticamente a los usuarios siguientes por la ruta con el mejor rendimiento. Para obtener más información sobre los análisis cuando la Ruta ganadora o las Rutas personalizadas están activadas para tu experimento, consulta:
Configuración adicional
Las rutas de experimentos registran a los usuarios que entran en cada paso y se convierten mientras están en la ruta asignada. Esto realiza el seguimiento de todos los eventos de conversión especificados en la configuración de Canvas. En la pestaña de configuración adicional, introduce el número de días (entre 1 y 30) durante los que deseas que este experimento realice el seguimiento de las conversiones. El intervalo de tiempo que especifiques aquí determina durante cuánto tiempo se realizarán el seguimiento de los eventos de conversión (seleccionados en la configuración de Canvas) para el experimento. Las ventanas de conversión por evento especificadas en la configuración de Canvas no se aplican al seguimiento de este paso y se sustituyen por esta ventana de conversión.
La ventana de conversión se abre cuando el usuario entra en el paso «Ruta de experimentos», no cuando se envía un mensaje posterior. Si una ruta incluye retrasos, como un paso de retraso o Intelligent Timing, esos retrasos consumen parte de la ventana de conversión.
Si utilizas Intelligent Timing en un paso de mensaje dentro de una ruta de experimentos, el tiempo transcurrido entre la entrada en el experimento y el envío real del mensaje reduce la ventana de conversión efectiva para esa ruta de experimentos. Por ejemplo, si tu experimento tiene un periodo de conversión de 5 días y Intelligent Timing retrasa el mensaje 2 días, los usuarios de esa ruta solo tendrán 3 días después de recibir el mensaje para realizar la conversión dentro del periodo del experimento, aunque los propios análisis del paso Mensaje realicen un seguimiento de las conversiones desde el momento en que se envía el mensaje.
Para obtener análisis de experimentos más claros, coloca cualquier retraso (como los pasos de retraso) antes del paso de ruta de experimentos, en lugar de dentro de una ruta de experimentos. De esta manera, todas las rutas comienzan desde el mismo punto y los retrasos no consumen nada de la ventana de conversión.
Editar esta página en GitHub