Guía para compradores
¿Cuánto tráfico necesita para hacer pruebas A/B?
Resumen: Poder hacer pruebas A/B depende del tráfico, la tasa de conversión base y el efecto mínimo que necesita detectar. Las tasas de conversión más bajas y los efectos más pequeños necesitan muchos más visitantes. Cuando el tráfico es demasiado bajo, las mejoras basadas en la investigación y las pruebas en pasos con mucho tráfico son mejores puntos de partida.
Tres cifras deciden la viabilidad
- La tasa de conversión base del paso que quiere probar.
- El efecto mínimo detectable (MDE): el cambio relativo más pequeño que merece la pena detectar.
- El tráfico que llega a ese paso cada semana.
Cuanto más baja es la base y más pequeño el efecto, más visitantes necesita. Reducir el MDE a la mitad multiplica aproximadamente por cuatro la muestra necesaria.
Un ejemplo práctico
Supongamos que una ficha de producto convierte al 3 % y quiere detectar una mejora relativa del 10 % (del 3,0 % al 3,3 %) con los ajustes habituales (95 % de confianza, 80 % de potencia). Necesita del orden de 50.000 visitantes por variante. Con 20.000 visitantes a la semana repartidos entre dos variantes, esa prueba necesita unas cinco semanas.
Si solo le interesa una mejora del 20 %, la muestra baja a aproximadamente una cuarta parte. Por eso las agencias insisten en cambios más grandes y atrevidos en webs con poco tráfico.
Cuando el tráfico es demasiado bajo
- Pruebe más arriba en el embudo, donde hay más tráfico, como en las páginas de precios o el inicio del registro.
- Use cambios más potentes que puedan mover los resultados un 20 % o más.
- Apóyese en la investigación: las grabaciones de sesiones, las encuestas y las pruebas de usabilidad detectan problemas que puede corregir sin una prueba.
- Publique y monitorice mejoras de bajo riesgo con una medición clara de antes y después.
Las buenas agencias comprueban la viabilidad antes de proponer un programa de pruebas. Wavesy, por ejemplo, indica que cuando las pruebas no son viables, la investigación y las mejoras puntuales pueden ser un mejor comienzo.
No detenga las pruebas antes de tiempo
Mirar los resultados a diario y parar en la primera lectura significativa dispara los falsos positivos. Acuerde el tamaño de muestra y la duración antes del lanzamiento, deje correr ciclos de negocio completos (normalmente semanas enteras) y decida solo entonces.
Vea qué herramientas encajan con su configuración en nuestro directorio de herramientas de experimentación.
Temas: Pruebas A/B, CRO para SaaS y B2B