Tweets de Google sobre pruebas multivariantes (MVT), enlaces a una explicación completa

El 24 de agosto de 2021, el canal de Twitter de Google Analytics tenía un tweet sobre pruebas multivariantes.

La semana tweek vinculada a una página en el Centro de recursos de Optimize que habla sobre experimentos. (Por cierto, en caso de que no esté seguro de qué es, Google Optimize es básicamente una plataforma que puede usar para ejecutar experimentos en su sitio web).

La página tuiteada describe 3 tipos de experimentos: A / B, multivariante y pruebas de redirección.

Pruebas A/B (también llamadas pruebas divididas)

De hecho, escribí sobre las pruebas divididas aquí, lo que, en mi opinión, sirve como una buena descripción de lo que son.

Dicho esto, puedo resumir lo que es una prueba A / B.

Usemos un ejemplo hipotético.

Digamos que tienes una heladería no láctea. Tienes 2 opciones de espolvoreos disponibles, pero quieres saber cuál prefiere la mayoría de tus clientes, o si hay una diferencia clara.

Por lo tanto, hace que esas 2 opciones estén disponibles: espolvorear la opción A (por ejemplo, chispas de chocolate) y espolvorear la opción B (masa de galletas).

Para cada cliente que quiera rociar, puede elegir entre la opción A o la opción B.

Llevas la cuenta de cada cliente y, si querían espolvoreos, la opción que hacían.

Después de unos 500 clientes (que calculas que es un número estadísticamente lo suficientemente grande) que prefirieron los espolvoreos, cuentas: el 75% de los que querían espolvoreos eligieron chispas de chocolate.

Ese es un ejemplo de una prueba A / B. Se prueban 2 variaciones de una variable (en este caso, la variable son los espolvoreos de helado, y las variaciones son las chispas de chocolate y la masa de galletas).

Por supuesto, ese fue un ejemplo fuera de línea, pero el proceso exacto se aplica al mundo en línea.

Pruebas multivariantes

Las pruebas multivariantes (MVT) son donde, en lugar de probar 2 variaciones de una sola variable, puede probar más de 3 variaciones, o incluso múltiples variables en ciertas combinaciones. (Google tiene una buena definición de pruebas multivariantes aquí).

Pruebas de redireccionamiento

Una prueba de redirección puede ser parte de la configuración de una prueba A / B o dividida. Definí una prueba dividida como la prueba de 2 variaciones de una variable.

Bueno, digamos que estás trabajando en una página web, y has terminado en un 99%, pero no estás seguro de qué título usar. Tienes 2 opciones de titulares que puedes usar.

Por lo tanto, como parte de sus pruebas A / B, configuró la página A (con el título A) y la página B (con el título B).

A continuación, envía números iguales de su tráfico a cada una de estas variaciones. Luego, una vez que haya enviado una cantidad estadísticamente significativa de tráfico a estas variaciones, cuenta sus ventas de cada titular, y el título que generó la mayor cantidad de ventas (siempre que sea por un margen estadísticamente lo suficientemente significativo) gana.

(Dicho esto, creo que también puede usar pruebas de redirección en pruebas multivariantes).

En resumen, eso es lo que son las pruebas A / B, multivariante y de redirección, y Google Optimize es una gran plataforma para comenzar a aprender la mecánica detrás de estos.

Fuente: Canal de Twitter de Google Analytics