¿Qué son las pruebas A/B?
Las pruebas A/B (También conocidas como A/B Testing) son usadas en el campo del diseño para poder determinar qué variación tiene mejores resultados.
La prueba es sencilla: Hay dos variaciones del mismo diseño y se presentan de forma dividida y aleatoria a los usuarios, con ayuda de herramientas de medición se logra saber si el diseño A es más conveniente para la meta que el B o viceversa.
¿Cómo podria ser mejor? Si estamos hablando de una tienda en línea y la variación A es un ícono de carrito de compras, siendo B únicamente el texto “Carrito” y el segundo obtiene 5% más de ventas sabemos que éste es mejor para el negocio.
Por definición una prueba A/B solo marca 2 variaciones. Hay otro tipo de pruebas que puede tomar más de 2 variaciones y la finalidad es la misma, saber que variación obtiene los mejores resultados. Se deben repartir el número de usuarios de forma equitativa entre cada variación con el fin de hacer la prueba de forma correcta.
Se llaman A/B porque hay modelo A y modelo B
Es importante aclarar que aunque se puede probar con todos los usuarios, algunas empresas grandes como Facebook, Twitter y Amazon suelen hacer las pruebas en una cantidad muy pequeña de sus usuarios totales pero dado su tamaño la cantidad de usuarios con los que se prueba sigue estando en las decenas de miles.
Los fines estadísticos de realizar pruebas también permiten que con ayuda de herramientas de medición y estadística se puedan interpretar los resultados. Hay herramientas online automatizadas pero usar un reporte de una base de datos o en excel suelen ser suficientes si se sabe qué se está midiendo.
¿Cómo hacer una prueba A/B?
El primer paso es determinar lo que se quiere medir, generalmente es mala idea hacer pruebas por el hecho de hacerlas, se suele tener una nueva idea o concepto y las pruebas son para validar si el nuevo diseño o variación presenta mejores resultados, si no se descarta.
En la web (suena tan anticuado dicho así) podemos hacerlas enviando las diferentes versiones desde el servidor o bien se puede hacer con JavaScript desde el Front-end. Cualquiera de los enfoques debe enviar el mismo número de variaciones de A como de B y se debe tener claro que se está midiendo.
Como puede haber muchas cosas que medir no se debe dejar de lado que el diseño es lo que se mide y se determina el mejor según los resultados.
- Agregar algo al carrito – Cambiar el botón de agregar, cambiar carrito por bolsa, usar un ícono, cambiar colores.
- Ver el carrito de compras – El precio de envío, las formas de pago, la percepción de seguridad.
- Al momento de pago – Si existen meses sin intereses, la percepción de seguridad, el tiempo estimado de entrega.
- Al abandonar el carrito – Si fue en la parte del pago o de los envíos, si había una sesión iniciada, si había ofertas que expiraron.
En un carrito de ventas se pueden hacer variaciones en muchos puntos:
¿Cuándo hacer pruebas A/B?
En muchas ocasiones no es posible medir correctamente el funcionamiento de un diseño porque la cantidad de usuarios disponibles se prestaría a diseños que podrían no reflejar la realidad. No hay una cifra exacta para saber si un diseño funciona bien o no, muchas veces variaciones de 3% pueden ser irreales cuando hubo solamente 100 pruebas pero si hubo 1000, 30 personas son entonces una cantidad considerable. Depende mucho de la respuesta a la variación de diseños según el tamaño de la muestra.
También es importante aclarar que las pruebas son el tipo de cosas que nos puede obsesionar. Podemos pensar en “necesito mejorar 5% mi conversión” cuando quizá sea más importante gastar el tiempo y recursos en otras áreas como atención al cliente, desarrollo del producto o creación de nuevas y mejores características, cosas que podrían tener un impacto mayor que solo 3% en los usuarios y clientes.
Cosas a tener en cuenta
- Sólo importan los usuarios que visitan la página o páginas donde está presente la prueba.
- No dejarse llevar por números grandes, lo que importa son los procentajes.
- Hacer las pruebas por tiempo prolongado. Una semana no es suficiente para un sitio con 300 visitas.
- No se deben hacer pruebas si hay cosas más importantes que hacer.
Espero te haya servido para poder comprender la importancia y metodología de pruebas. Si tienes alguna duda puedes preguntarme y te ayudaré a resolverla.
Actualmente estoy escribiendo 3 posts: La caída de Twitter, Podcasts: Renacimiento y cultura y ¿Cómo mejorar mi nivel de programación?. Puedes suscribirte a mi lista de correos para ser notificado cuando publico algo nuevo o bien, seguirme en Twitter.
Publicado por Julio Montaño el 3/Nov/2015.