- “Experimentos ilimitados” suena potente, pero el verdadero cuello de botella para el e-commerce en crecimiento no es el número de tests — es el diseño de tests, el tráfico por test y la capacidad del equipo para interpretar resultados.
- El testing ilimitado solo aporta valor si también puedes ejecutar grupos mutuamente exclusivos, aislamiento estadístico y tienes suficiente tráfico por variante para lograr significancia estadística.
- Entre las principales plataformas, Varify (tarifa plana), Convert y Kameleoon ofrecen testing efectivamente ilimitado dentro de su nivel; Optimizely y AB Tasty limitan según términos contractuales.
- Si tu tienda factura más de €5M anuales con más de 200.000 visitantes mensuales, el testing ilimitado realmente cambia lo que es posible. Por debajo de eso, probablemente te limitarás a 12-20 tests de calidad al año independientemente del techo de la plataforma.
La propuesta está en todas partes: experimentos ilimitados, variantes ilimitadas, objetivos ilimitados. Para una marca de e-commerce en crecimiento suena exactamente como lo que necesitas — eliminar las restricciones, dejar que el equipo se desate, ver cómo se acumulan los éxitos. La realidad es más matizada. El testing ilimitado tiene valor real, pero solo en ciertos niveles de tráfico, con ciertas estructuras de equipo y solo cuando la plataforma de testing maneja adecuadamente los efectos secundarios (contaminación de tests, aislamiento estadístico, carga de rendimiento).
Este artículo desglosa qué significa realmente “ilimitado” en la práctica para equipos de e-commerce que escalan de €1M a €50M de facturación anual — incluyendo las matemáticas del tráfico, la lista corta de plataformas y dónde el testing ilimitado realmente cambia lo que es posible vs. dónde es solo un eslogan de marketing que no afectará tu realidad.
Qué significa realmente “experimentos ilimitados”
Las diferentes plataformas entienden cosas distintas por “ilimitado”. Los cuatro tipos:
1. Tests activos ilimitados
Puedes tener cualquier número de tests ejecutándose simultáneamente. La plataforma no limita los experimentos concurrentes. La mayoría de las plataformas modernas ahora ofrecen esto en sus niveles medios y superiores.
2. Variantes ilimitadas por test
Puedes testear 10 variantes en lugar de estar limitado a 4. Útil para exploración de diseño, pero ten cuidado: con 10 variantes, cada una recibe el 10% del tráfico del test, lo que significa que necesitas 10 veces más tráfico para alcanzar significancia. A menudo más potente en teoría que en la práctica.
3. Objetivos/métricas ilimitadas rastreadas por test
Puedes rastrear ingresos, AOV, tasa de añadir al carrito, tiempo en página y otras 50 métricas por test. Casi siempre innecesario — rastrear demasiadas métricas secundarias aumenta el riesgo de falsos positivos y dificulta la interpretación, no la facilita.
4. Usuarios testeados ilimitados (sin precios basados en tráfico)
El tipo de “ilimitado” más genuinamente valioso para e-commerce en crecimiento. Tu factura no cambia cuando el tráfico crece o hay picos durante temporadas altas. Los precios de tarifa plana son la versión amigable para e-commerce de esto.
Precios predecibles de testing A/B a medida que tu e-commerce escala.
Varify cobra una tarifa mensual plana independientemente del tráfico. Ejecuta tantos tests como tu equipo pueda lanzar, sin que tu factura rastree tu crecimiento.
Cuándo el testing ilimitado realmente cambia lo que es posible
Cambia las cosas cuando:
- Tienes más de 200.000 visitantes mensuales. Por debajo de esto, no tienes suficiente tráfico para ejecutar más de 4-6 tests simultáneos con potencia estadística. El límite no es restrictivo.
- Tienes un equipo de experimentación dedicado (2+ personas). Por debajo de esto, no puedes generar suficientes ideas de test de calidad para llenar un programa ilimitado. El cuello de botella pasa de la plataforma al equipo.
- Operas en múltiples categorías o páginas. Un retailer multicategoría puede ejecutar tests de home, categoría, PDP y checkout simultáneamente sin solapamiento. Una marca de un solo producto no puede.
- Tienes picos estacionales de tráfico. Los usuarios testeados ilimitados (es decir, precios de tarifa plana) son genuinamente valiosos en Black Friday, Cyber Monday y eventos de ventas importantes.
No cambia las cosas cuando:
- Tienes menos de 100.000 visitantes mensuales. Ejecutas entre 6 y 12 tests al año de todas formas; el límite no es restrictivo.
- Tu equipo es una persona haciendo CRO a tiempo parcial. La ideación de tests es el cuello de botella, no la capacidad de la plataforma.
- No tienes un marco claro de priorización de tests. Capacidad ilimitada sin un backlog de hipótesis produce testing desenfocado y ruido.
Las matemáticas del tráfico para e-commerce en crecimiento
La significancia estadística requiere un tamaño mínimo de muestra por variante. Aquí están las matemáticas aproximadas:
- 5.000 visitantes por variante por semana es aproximadamente el mínimo para detectar una mejora del 10% en una tasa de conversión del 2% (línea base típica del e-commerce).
- Para un test A/B con división 50/50, eso son 10.000 visitantes por test por semana.
- Para 5 tests simultáneos en diferentes páginas, necesitas alrededor de 50.000 visitantes semanales pasando por esas páginas combinadas.
- Para 20 tests simultáneos — el tipo de programa donde el testing ilimitado importa — típicamente necesitas más de 200.000 visitantes mensuales con suficiente diversidad de páginas para evitar solapamiento.
La mayoría de las marcas de e-commerce en crecimiento alcanzan un techo práctico de alrededor de 6-15 tests de calidad al año, independientemente de la plataforma. Lo que “ilimitado” ofrece por encima de ese techo rara vez es el cuello de botella.
Qué plataformas realmente ofrecen testing ilimitado
Varify — efectivamente ilimitado dentro del nivel, tarifa plana
El precio mensual plano significa que el número de usuarios testeados no limita. Sin límite en tests activos simultáneos en el nivel estándar. El enfoque en páginas individuales significa que los tests simultáneos en diferentes páginas no entran en conflicto. Excelente opción para e-commerce europeo que necesita precios predecibles a medida que crece el tráfico.
Convert — tests ilimitados en la mayoría de planes
La mayoría de planes incluyen tests y objetivos ilimitados. El precio escala con usuarios testeados mensuales, así que “ilimitado” solo aplica al número de tests, no al tráfico.
Kameleoon — ilimitado dentro del nivel enterprise
El nivel estándar ofrece tests ilimitados; el precio es enterprise. Fuerte en personalización con IA, lo que puede impulsar la eficiencia a escala.
VWO — dependiente del nivel, basado en tráfico
Los niveles superiores de VWO incluyen tests ilimitados pero el precio escala con usuarios testeados mensuales. Una tienda con alto tráfico puede llegar rápidamente a una factura mucho mayor.
Optimizely — definido contractualmente
Los números de tests y usuarios testeados se negocian en el contrato enterprise. “Ilimitado” depende de lo que hayas firmado.
AB Tasty — dependiente del nivel
Los niveles premium incluyen tests ilimitados. El precio es típicamente enterprise.
Qué realmente ayuda más al e-commerce en crecimiento que el testing ilimitado
Si estás escalando de €1M a €50M de facturación anual, en nuestra experiencia estos factores importan más que el techo de tests:
- Un marco claro de priorización de tests. ICE (Impacto / Confianza / Facilidad) o PIE (Potencial / Importancia / Facilidad). Sin uno, tu equipo ejecuta tests ad-hoc sobre lo que parezca urgente esa semana.
- Disciplina en el diseño de tests. Declaración de hipótesis, métrica primaria única, tamaño de muestra definido, plan de análisis pre-registrado. El diseño descuidado de tests desperdicia más mejora que cualquier límite de tests de la plataforma.
- Madurez estadística. Detén los tests al alcanzar significancia, no el primer día que parecen ganadores. Usa un umbral de confianza apropiado a tu tolerancia al riesgo (típicamente 90-95% unilateral).
- Una biblioteca de aprendizajes. Documenta cada test — ganadores y perdedores — con la hipótesis, variante, resultado y qué aprendiste. Esto se compone a lo largo de años.
- Precios predecibles. Si estás escalando, las sorpresas de precios basados en tráfico duelen. La tarifa plana evita esto.
