Product Gym · Experimentación

El reparto que no cuadra

SeniorDecisión

Contexto

Eres PM del flujo de publicar anuncios en un marketplace de segunda mano estilo Wallapop (hipotético). El equipo probó un formulario nuevo que sugiere precio y categoría a partir de la foto. El reparto planificado era 50/50 por usuario, en web, iOS y Android. El test terminó en la fecha prevista y la variante gana con claridad: más usuarios terminan de publicar. El viernes, en la reunión de producto, la directora pregunta si se lanza el lunes. Tú has visto un detalle en la tabla: el control tiene 50.900 usuarios y la variante 49.100. Alguien del equipo comenta: «Es un 51/49, normal, el azar no da números redondos». Restricción: Marketing tiene preparada una campaña sobre «publica en 30 segundos» que depende de este lanzamiento.

SegmentoControlVariantePrueba de reparto (chi cuadrado, 1 grado de libertad)
Total de usuarios50.90049.100χ² = 32,4; p ≈ 0,00000001
Web30.20030.100χ² = 0,17; p = 0,68
iOS10.30010.200χ² = 0,49; p = 0,48
Android10.4008.800χ² = 133; p prácticamente 0
Publican un anuncio (primaria)22,0 %23,1 %+1,1 pp (de +0,6 a +1,6); p < 0,001

Datos hipotéticos.

Tu decisión

¿Lanzas la variante el lunes?

Con cuenta gratuita

Crea tu cuenta gratis para resolver este ejercicio

Crea una cuenta gratuita para acceder al contenido y guardar tu progreso.

¿Ya tienes cuenta?

Built with ♥ by J.L.G.