Pruebas de campañas: comparar efectos y no solo clics

En resumen

Una prueba útil define de antemano población, conversión y regla de decisión. Una tasa observada superior no identifica automáticamente una variante ganadora.

Mapa mundial de redes en una sala de inteligencia vacía Ilustración · escena ficticia
En este artículo

Ejemplo ficticio: del 5 % al 6 %

Cada grupo recibe 1000 personas elegibles asignadas al azar. En la misma ventana de seguimiento, A tiene 50 personas con conversión cualificada y B tiene 60. Las tasas son 5 % y 6 %: diferencia de 1 punto porcentual o aumento relativo del 20 %.

Medida ficticiaAB
Personas asignadas10001000
Personas con conversión cualificada5060
Tasa de conversión5 %6 %
Diferencia absoluta frente a A (puntos porcentuales)0+1
Diferencia relativa frente a A0 %+20 %

Preparar un resultado interpretable

  • Fije hipótesis, unidad de asignación, indicador principal, muestra necesaria, horizonte y regla de parada. Planifique una medida de incertidumbre compatible con análisis intermedios y comparaciones múltiples.
  • Mantenga un denominador coherente con la asignación. Seleccionar solo a quienes hicieron clic tras la exposición puede sesgar el resultado. Revise duplicados, pérdidas de medición y reparto de grupos.
  • Espere la maduración de conversiones prevista. Un reparto anormal de participantes exige diagnóstico antes de interpretar el efecto.

Decidir sin prometer retorno de la inversión

Estos recuentos no demuestran por sí solos un efecto cierto ni mayor rentabilidad. Examine intervalos de incertidumbre, coste, calidad de conversiones y efectos adversos. Una comparación antes/después también puede reflejar estacionalidad o cambios de audiencia; no reemplaza automáticamente un control comparable.

Fuentes primarias