{"id":24079,"date":"2025-10-15T18:57:10","date_gmt":"2025-10-15T16:57:10","guid":{"rendered":"https:\/\/varify.io\/?p=24079"},"modified":"2026-04-22T17:28:51","modified_gmt":"2026-04-22T15:28:51","slug":"multivariate-testing","status":"publish","type":"post","link":"https:\/\/varify.io\/es\/blog\/multivariate-testing\/","title":{"rendered":"Pruebas multivariantes: por qu\u00e9 son (normalmente) una mala idea y cu\u00e1ndo merecen realmente la pena"},"content":{"rendered":"
\n\t\t\t\t
\n\t\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t\t\t\t\t

Las pruebas multivariantes (MVT) parecen potentes a primera vista: se pueden probar varios elementos simult\u00e1neamente y reconocer sus interacciones.<\/p>

En la pr\u00e1ctica, sin embargo, son agotadores de tr\u00e1fico<\/b>, estad\u00edsticamente complicados<\/b> y simplemente demasiado lentos<\/b> para la mayor\u00eda de los sitios web.<\/p>

Un MVT s\u00f3lo tiene sentido a partir de varios cientos de miles de visitantes al mes<\/b> o tasas de conversi\u00f3n superiores a 5%<\/b>.<\/p>

Hasta entonces: Las pruebas A\/B\/n bien planificadas ofrecen resultados v\u00e1lidos con mayor rapidez<\/strong>.<\/p>\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t

\n\t\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t

Qu\u00e9 hacen realmente las pruebas multivariantes<\/h2>\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t\t\t\t\t

Una prueba multivariante pone a prueba varios elementos simult\u00e1neamente<\/strong>.<\/p>

Ejemplo:
Pruebas 2 titulares \u00d7 2 im\u00e1genes \u00d7 2 botones \u2192 esto da como resultado 8 combinaciones<\/strong>.<\/p>

Cada combinaci\u00f3n recibe su parte del tr\u00e1fico: s\u00f3lo 1\/8 de los visitantes si se distribuyen uniformemente.<\/p>

Y aqu\u00ed es precisamente donde radica el problema: el tr\u00e1fico por variante se reduce dr\u00e1sticamente<\/strong>, y con \u00e9l la significaci\u00f3n de sus datos<\/strong>.<\/p>

Resultado: las pruebas duran mucho m\u00e1s<\/strong>, la significaci\u00f3n se alcanza m\u00e1s tarde<\/strong> y, mientras tanto, se bloquean otros experimentos<\/strong>.<\/p>\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t

\n\t\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t

Por qu\u00e9 las pruebas multivariantes rara vez son \u00fatiles<\/h2>\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t
\n\t\t
\n\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t\t\t
\n\t\t\t
\n\t\t\t<\/i>\t\t\t<\/div>\n\t\t<\/div>\n\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t
\n\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t\t\t\t\t

1. el tr\u00e1fico se reparte entre demasiadas variantes<\/h3>\nUn mayor n\u00famero de combinaciones significa que sus visitantes se reparten entre muchos grupos.\n Esto reduce la potencia estad\u00edstica (es decir, la capacidad de reconocer efectos reales).\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t
\n\t\t
\n\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t\t\t
\n\t\t\t
\n\t\t\t<\/i>\t\t\t<\/div>\n\t\t<\/div>\n\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t
\n\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t\t\t\t\t

2. las pruebas son eternas<\/h3>

Incluso con 100.000 visitantes al mes, pueden pasar meses<\/strong> antes de que veas un resultado - mientras que habr\u00edas generado varios aprendizajes v\u00e1lidos hace tiempo con una simple prueba A\/B.<\/p>\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t

\n\t\t
\n\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t\t\t
\n\t\t\t
\n\t\t\t<\/i>\t\t\t<\/div>\n\t\t<\/div>\n\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t
\n\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t\t\t\t\t

3. estad\u00edsticas m\u00e1s complejas e \u00edndice de error m\u00e1s elevado<\/h3>

Cada variante adicional aumenta el riesgo de encontrar aleatoriamente un falso ganador<\/strong> (esto se denomina acumulaci\u00f3n de errores alfa<\/strong>).<\/p>

Cuantas m\u00e1s pruebas se realicen, mayor ser\u00e1 la probabilidad de que una variante parezca accidentalmente mejor<\/strong>, aunque no lo sea. Esto tambi\u00e9n se conoce como el \"problema de la comparaci\u00f3n m\u00faltiple\".<\/p>\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t

\n\t\t
\n\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t\t\t
\n\t\t\t
\n\t\t\t<\/i>\t\t\t<\/div>\n\t\t<\/div>\n\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t
\n\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t\t\t\t\t

4 Peque\u00f1os efectos, grandes esfuerzos<\/h3>\nLos MVT a menudo s\u00f3lo muestran efectos de ajuste fino: por ejemplo, que el bot\u00f3n A funciona m\u00ednimamente mejor con el titular B. En la pr\u00e1ctica, estos miniefectos no suelen ser lo bastante relevantes como para justificar el esfuerzo.\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t
\n\t\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t

Qu\u00e9 significa realmente \"poder\" (explicado de forma sencilla)<\/h2>\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t\t\t\t\t

La potencia<\/strong> de una prueba describe la probabilidad de que realmente se detecte un efecto real<\/strong>.<\/p>

Por ejemplo, si una prueba tiene una potencia de 80 %<\/strong>, esto significa que si existe una diferencia real, tambi\u00e9n la encontrar\u00e1 estad\u00edsticamente en 8 de cada 10 casos<\/strong>.<\/p>

En 2 de cada 10 casos (20 %) usted creer\u00eda falsamente que no hay efecto<\/strong>.<\/p>

Cuanto menor sea la subida, m\u00e1s visitantes<\/strong> necesitar\u00e1 para mantener el mismo valor de potencia.<\/p>

Por tanto, un MVT con 8 combinaciones necesita mucho m\u00e1s tr\u00e1fico<\/strong> para alcanzar la misma potencia que un simple test A\/B.<\/p>\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t

\n\t\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t

Por qu\u00e9 necesita al menos 500 conversiones por variante<\/h2>\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t\t\t\t\t

Una regla aproximada de la pr\u00e1ctica de CRO es:<\/p>\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t

\n\t\t\t\t
\n\t\t\t\t\t\t\t
\n\t\t\t

\n\t\t\t\tSe necesitan al menos 500 conversiones por variante para poder hacer una afirmaci\u00f3n razonablemente estable.\t\t\t<\/p>\n\t\t\t\t\t<\/blockquote>\n\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t

\n\t\t\t\t
\n\t\t\t\t\t\t\t\t\t

Hay tres razones para ello:<\/p>

  1. Los \u00edndices de conversi\u00f3n fluct\u00faan extremadamente con muestras muy peque\u00f1as: las peque\u00f1as coincidencias pueden distorsionar el resultado.<\/li>
  2. Las herramientas no pueden realizar pruebas de significaci\u00f3n limpias si los eventos por variante son demasiado peque\u00f1os.<\/li>
  3. A partir de unas 500 conversiones, la distribuci\u00f3n se estabiliza, de modo que incluso las peque\u00f1as diferencias se hacen visibles.<\/li><\/ol>\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t
    \n\t\t\t\t
    \n\t\t\t\t\t\t\t\t\t

    Importante:<\/strong> Esto se aplica por variante<\/strong> - es decir, tambi\u00e9n para cada combinaci\u00f3n en un MVT.<\/p>

    Si tiene 8 combinaciones, necesita al menos 8 \u00d7 500 = 4000 conversiones<\/strong> s\u00f3lo para cumplir el requisito b\u00e1sico.<\/p>

    Dependiendo de la tasa de conversi\u00f3n, esto puede atraer r\u00e1pidamente a cientos de miles de visitantes<\/strong>.<\/p>\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t

    \n\t\t\t\t\t
    \n\t\t\t\t
    \n\t\t\t\t
    \n\t\t\t\t\t

    El error alfa: por qu\u00e9 m\u00e1s variantes aumentan el riesgo<\/h2>\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t
    \n\t\t\t\t
    \n\t\t\t\t\t\t\t\t\t

    El error alfa (error del primer tipo)<\/strong> describe la probabilidad de que usted identifique err\u00f3neamente una variante como la ganadora<\/strong>, aunque no haya ninguna diferencia real.<\/p>

    Un ejemplo:
    Si trabaja con un nivel de significaci\u00f3n de 5 % (\u03b1=0,05\\alpha=0{,}05\u03b1=0,05), esto significa que<\/p>