Grupo de control global
Utilice el Grupo de control global para especificar un porcentaje de todos los usuarios que no deberían recibir ninguna campaña o lienzo, lo que le permitirá analizar el impacto global de sus esfuerzos de mensajería a lo largo del tiempo.
Al comparar los comportamientos de los usuarios que reciben mensajes con los que no los reciben, puede comprender mejor cómo sus campañas de marketing y sus lienzos dan lugar a un aumento de las sesiones y los eventos personalizados.
Funcionamiento del Grupo Mundial de Control
Con el Grupo de Control Global, puede establecer un porcentaje de todos los usuarios como grupo de control. Una vez guardado, los usuarios del grupo no recibirán campañas ni lienzos.
Su grupo de control global se aplica a todos los canales, campañas y lienzos, a excepción de las campañas API y las News Feed Cards (en desuso). Los usuarios de tu grupo de control seguirán recibiendo campañas API y tarjetas de canal de noticias. Esta excepción no se aplica a las tarjetas de contenido: si utiliza tarjetas de contenido, los usuarios de su grupo de control no las recibirán.
Asignar usuarios aleatoriamente al Grupo de Control Global
Braze selecciona aleatoriamente múltiples rangos de números de cubos aleatorios e incluye usuarios de esos cubos seleccionados. Si actualmente utilizas números de contenedor aleatorios para otros fines, consulta Cosas que debes tener en cuenta.
Cuando se genere tu grupo de control global, todos los usuarios con números de contenedor aleatorios formarán parte del grupo. Además, los nuevos usuarios que se unan después de este punto (los adquiridos después de que se generara el grupo de control global) que tengan estos números de contenedor aleatorios también se añadirán al grupo de control global. Del mismo modo, si se eliminan muchos usuarios, es de esperar que el tamaño de tu grupo de control global se reduzca, porque un porcentaje de esos usuarios eliminados habrá caído en este grupo. Esto mantiene el tamaño de tu grupo como un porcentaje constante respecto a toda tu base de uso.
Asignar usuarios aleatoriamente al grupo de tratamiento para la elaboración de informes
Para que puedas informar sobre la elevación, Braze también crea un grupo de tratamiento. El grupo de tratamiento es un grupo seleccionado aleatoriamente de usuarios que no forman parte de tu grupo de control global, y se genera utilizando el mismo método de número de contenedor aleatorio que el grupo de control global.
Tu grupo de tratamiento tendrá un tamaño similar al de tu grupo de control global, pero es poco probable que tenga exactamente el mismo tamaño. Para los informes, Braze mide los comportamientos de los usuarios de tu grupo de control y de los usuarios de tu muestra de tratamiento. Cada espacio de trabajo tiene como máximo un grupo de control global y un grupo de muestra de tratamiento. El grupo de muestra de tratamiento es el mismo grupo de usuarios, independientemente de cómo configures tus informes de control global.
Excluir usuarios de las banderas de características
No puedes habilitar los indicadores de características para los usuarios de tu grupo de control global. Esto significa que los usuarios de tu grupo de control global tampoco pueden formar parte de los experimentos con banderas de características.
Crear un grupo de control global
Paso 1: Vaya a la configuración del grupo de control global
En el panel de control, vaya a Audiencia > Grupo de control global.
Paso 2: Asignar un porcentaje de todos los usuarios a este grupo de control
Introduce un porcentaje para tu grupo de control y selecciona Guardar. Una vez introducido, Braze le muestra una estimación de cuántos usuarios entrarán en su muestra de Control global, tratamiento y tratamiento. Ten en cuenta que cuantos más usuarios tengas en tu espacio de trabajo, más precisa será esta estimación.
El número de usuarios de su Grupo de control global se actualiza automáticamente tras su configuración inicial para que siga siendo proporcional a este porcentaje de audiencia cuando se añadan más usuarios a su espacio de trabajo. Además, los nuevos usuarios que se unan después de que se haya configurado el grupo de control global y que tengan números de contenedor aleatorios también se añadirán al grupo de control global. Si se añaden muchos usuarios, entonces puedes esperar que el tamaño de tu grupo de control global crezca de modo que mantenga un porcentaje constante en relación con toda tu base de usuarios. Para conocer las pautas porcentuales, consulta la siguiente sección de buenas prácticas.
Paso 3: Asignar parámetros de exclusión
Utilice etiquetas para añadir configuraciones de exclusión a su Grupo de Control Global. Las campañas o lienzos que utilicen las etiquetas incluidas en la configuración de exclusión no utilizarán su Grupo de control global. Estas campañas y lienzos siguen enviándose a todos los usuarios del público objetivo, incluidos los de su Grupo de control global.
Es posible que desee añadir ajustes de exclusión si tiene mensajes transaccionales que deben enviarse a todos los usuarios.
Paso 4: Guarda tu grupo de control
En este punto, Braze genera un grupo de usuarios seleccionados aleatoriamente para que constituyan el porcentaje seleccionado de su base total de usuarios. Una vez guardado, todas las campañas y lienzos activos y futuros dejarán de enviarse a los usuarios de este grupo, excepto las campañas o lienzos que contengan alguna de las etiquetas de la configuración de exclusión.
Hacer cambios en tu grupo de control global
Sólo puedes hacer cambios en tu grupo de control global desactivándolo y creando uno nuevo. Por ejemplo, si configuras un grupo de control global que represente el 10% de tu audiencia y quieres reducir su tamaño al 5%, debes desactivar tu grupo de control global actual y volver a habilitar un nuevo grupo de control global.
Puede desactivar su Grupo de control global en cualquier momento desde la pestaña Configuración del grupo de control global, pero tenga en cuenta que al hacerlo los usuarios de este grupo podrán participar inmediatamente en campañas y Canvas.
Antes de desactivar su grupo de control, le recomendamos que exporte un CSV de los usuarios de ese grupo por si necesita consultarlo más adelante. Cuando se desactiva un grupo de control, no hay forma de que Braze restaure el grupo o identifique qué usuarios estaban en este grupo.
Después de desactivar su Grupo de Control, puede guardar uno nuevo. Al introducir un porcentaje y guardarlo, Braze genera un nuevo grupo de usuarios seleccionados aleatoriamente. Si introduce el mismo porcentaje que antes, Braze seguirá generando un nuevo grupo de usuarios para sus grupos de control y tratamiento.
Exporte los miembros de su grupo de control
Si quieres ver qué usuarios están en tu grupo de control global, puedes exportar los miembros de tu grupo mediante CSV o API.
Para ejecutar una exportación CSV, vaya a la pestaña Configuración global del grupo de control y haga clic en Exportar. Para exportar por API, utiliza el punto final/users/export/global_control_group
.
Los grupos de control históricos no se conservan, por lo que sólo puede exportar los miembros de su grupo actual. Asegúrese de exportar toda la información necesaria antes de desactivar un grupo de control.
Ver si un usuario está en un grupo de control global
Puedes ver la pertenencia a un grupo de control global yendo a la sección Varios en la pestaña Interacción del perfil de un usuario individual.
Informe
Consulte Informes de grupos de control global para obtener información sobre las métricas de los informes.
Solución de problemas
A medida que vaya configurando sus grupos de control global y viendo los informes, estos son los errores con los que se puede encontrar:
Problema | Solución de problemas |
---|---|
No se puede guardar el porcentaje introducido al designar un Grupo de Control Global. | Este problema se produce si se introduce un número no entero o un número entero que no esté comprendido entre 1 y 15 (ambos inclusive). |
Error “Braze no puede actualizar su grupo de control global” en la página de configuración de control global. | Esto suele indicar que algún componente de esta página ha cambiado, probablemente debido a acciones realizadas por otro usuario en su cuenta Braze. En este caso, actualice la página y vuelva a intentarlo. |
El informe del Grupo Global de Control no contiene datos. | Si accede al informe de grupo de control global sin haber guardado un grupo de control global, no verá ningún dato en el informe. Cree y guarde un Grupo de Control Global e inténtelo de nuevo. |
Mi tasa de conversión es del 0% o no estoy viendo la visualización del gráfico, a pesar de que hay más de cero eventos ocurriendo. | Si el número de conversiones es muy pequeño y los grupos de control o tratamiento son muy grandes, la tasa de conversión puede redondearse al 0% y, por tanto, no aparecer en el gráfico. Puedes verificarlo comprobando la métrica Número total de eventos. Puede comparar la eficacia de los dos grupos utilizando la métrica del porcentaje de incremento. |
Mi tasa de conversión (u otras métricas) están cambiando drásticamente dependiendo del período de tiempo para el que estoy viendo los datos. | Si visualiza los datos en periodos cortos, es posible que sus métricas fluctúen de un día para otro o de una semana para otra. Le recomendamos que consulte las métricas durante al menos un mes. |
Aspectos a tener en cuenta
Números de cubo aleatorios superpuestos
Su Grupo de Control Global se forma utilizando Números de Cubo Aleatorios, y por lo tanto, si está ejecutando cualquier otra prueba utilizando filtros de segmento de Números de Cubo Aleatorios, tenga en cuenta que podría haber una superposición entre los segmentos que cree, y los usuarios de su Grupo de Control Global.
Direcciones de correo electrónico duplicadas
Si dos usuarios que tienen ID de usuario externos diferentes tienen la misma dirección de correo electrónico, y uno de estos usuarios está en el grupo de control y el otro no, se seguirá enviando un correo electrónico a esa dirección de correo electrónico siempre que el usuario que no está en el grupo de control pueda recibir un correo electrónico. Cuando esto ocurra, marcaremos ambos perfiles de usuario como que han recibido la campaña o Canvas que contiene ese correo electrónico.
Grupo de control global y grupos de control específicos de mensajes
Es posible tener un Grupo de Control Global y también utilizar un grupo de control específico de campaña o específico de Canvas. Disponer de un grupo de control específico para la campaña o el lienzo permite medir el impacto de un mensaje concreto.
A los usuarios de su grupo de tratamiento global se les retiene la recepción de cualquier mensaje que no sean aquellos con excepciones de etiquetas, y si añade un control a una campaña o Canvas, Braze retiene una parte de su grupo de tratamiento global de la recepción de esa campaña o Canvas en particular. Esto significa que si un miembro del Grupo de Control Global no es elegible para recibir una campaña o Canvas en particular, tampoco estará presente en el grupo de control para esa campaña o Canvas en particular.
En resumen, los usuarios del Grupo de control global son filtrados de la campaña o del público de Canvas antes de entrar. De los usuarios que entran en la campaña o Canvas, un porcentaje de ellos se asigna a la variante de control.
Segmentos del grupo de control global en la consola de desarrollador
Es posible que vea varios segmentos de Control Global en la sección Identificadores de API adicionales de la página Claves de API. Esto se debe a que cada vez que se activa o desactiva el Grupo de Control Global, se forma un nuevo Grupo de Control Global. Esto lleva a múltiples segmentos etiquetados como “Grupo de Control Global”.
Sólo uno de estos segmentos está activo y puede ser consultado utilizando el endpoint/users/export/global_control_group
, o exportado desde el cuadro de mandos. La exportación del panel indica específicamente qué subsegmentos componen este grupo de control global.
Pruebas de buenas prácticas
Tamaño óptimo del grupo de control
Hay que tener en cuenta dos reglas principales**:
- Su grupo de control no debe ser inferior a 1000 usuarios.
- El grupo de control no debe superar el 10% de su audiencia.
Si su audiencia total es inferior a 10.000, debe aumentar el porcentaje para crear un grupo de más de 1.000 usuarios; en este caso, no debe aumentar el porcentaje por encima del 15%. Tenga en cuenta que cuanto menor sea el tamaño total de su espacio de trabajo, más difícil será realizar una prueba estadísticamente rigurosa.
- Algunas de las ventajas y desventajas que hay que tener en cuenta al pensar en el tamaño del grupo de control son que se necesita un número significativamente grande de clientes en el grupo de control para que cualquier análisis de comportamiento creado sea fiable. Sin embargo, cuanto mayor sea el grupo de control, menos clientes recibirán sus campañas, lo que supone un inconveniente si las utiliza para impulsar la participación y las conversiones.
- El porcentaje ideal dependerá del tamaño de tu audiencia total. Cuanto mayor sea tu audiencia total, menor puede ser tu porcentaje. Sin embargo, si su público es reducido, necesitará un porcentaje mayor para su grupo de control.
Duración del experimento
Elija una duración ideal
La duración del experimento antes de reorganizar los miembros del grupo de control depende de lo que se esté probando y del comportamiento de referencia de los usuarios. Si no está seguro, un buen punto de partida es un trimestre (tres meses), pero no debe ser inferior a un mes.
Para determinar la duración adecuada de tu experimento, considera qué preguntas esperas responder. Por ejemplo, ¿quieres ver si hay diferencias en las sesiones? Si es así, piense en la frecuencia con la que sus usuarios tienen sesiones de forma orgánica. Las marcas cuyos usuarios tienen sesiones todos los días pueden realizar experimentos más cortos que las marcas cuyos usuarios tienen sesiones sólo un par de veces al mes.
O puede que te interese un evento personalizado, por lo que puede que tu experimento tenga que durar más que un experimento en el que examinas sesiones, si es probable que tus usuarios desencadenen ese evento personalizado con menos frecuencia.
Cuanto más tiempo se mantenga el mismo grupo de control, más divergirá del grupo de tratamiento, lo que puede crear un sesgo. El restablecimiento del grupo de control global reequilibra la población.
Trate de limitar la finalización prematura de los experimentos
Antes de comenzar el experimento, debe decidir cuánto tiempo va a durar y, a continuación, sólo debe terminar el experimento y recopilar los resultados finales una vez alcanzado este punto predeterminado. Terminar el experimento antes de tiempo, o siempre que se observen datos prometedores, introducirá un sesgo.
Piense en métricas valiosas
Tenga en cuenta los comportamientos de referencia para las métricas que más le interesan. ¿Te interesan las tasas de compra de los planes de suscripción que sólo se renuevan anualmente? ¿O tienen los clientes un hábito semanal para el evento que le gustaría medir? Piense en el tiempo que tardan los usuarios en alterar potencialmente sus comportamientos debido a su mensaje. Después de decidir cuánto tiempo debe durar tu experimento, asegúrate de no terminar tu experimento ni registrar los resultados finales antes de tiempo, o tus conclusiones podrían estar sesgadas.