1 votos

¿Cómo tratar las proporciones desiguales en una prueba A/B?

Tengo 100 clientes, 40 son mujeres y 60 son hombres. Mi equipo de marketing ha creado 2 campañas separadas con ofertas diferentes para ambos grupos. Creamos una prueba A/B para cada grupo con el fin de estudiar el impacto de la campaña. A continuación se muestran las divisiones (A = Sin oferta | B = oferta según el grupo)

Cuentas :

    Group  |  A  |  B  | Total
  -----------------------------
   Females |  10 |  30 |  40
   Males   |  20 |  40 |  60
  -----------------------------
   Total   |  30 |  70 | 100

Aquí están los resultados,

 Results : $ value purchased per person during active campaign dates 
 Again, A = Control, B = Test... so lift over control = (B-A)/A 

    Group  |  A  |  B  | Lift
  -----------------------------
   Females |  $5 |  $7 |  40%
   Males   |  $3 |  $4 |  33%
  -----------------------------
   Wt. Avg | $3.6| $5.3|  47%

Lo curioso es que la elevación de Total-A frente a Total-B es mayor que la de los grupos individuales, y me doy cuenta de que esto tiene algo que ver con la proporción de A:B entre los grupos. (Mujeres = 1:3, Hombres = 1:2)

Mi pregunta es ¿cuál es la mejor manera de resolver esta discrepancia?

1voto

user125367 Puntos 11

(Respuesta modificada tras el debate)
El problema surge de la ponderación, no sólo de los géneros (que entiendo es representativa de sus clientes), sino que es un artefacto de la división A/B, que es diferente entre los géneros. Si vuelve a hacer el cálculo, pero tanto los hombres como las mujeres tienen el mismo número en cada condición, tendrá lo siguiente.
Aumento para las mujeres 40% (como calculaste)
Aumento para los hombres 33% (como calculaste)
Aumento medio no ponderado (igual número de hombres y mujeres) 38
Elevación media ponderada (machos:hembras 3:2) 37%; entre las dos cifras, pero más cercana a la cifra masculina porque hay más machos.
Aumento medio ponderado (machos:hembras 2:1) 36%; todavía entre las dos cifras, pero aún más cerca de la cifra masculina porque hay aún más machos.

Vea las capturas de pantalla a continuación; avíseme si necesita las fórmulas.

Screenshot of spreadsheet

i-Ciencias.com

I-Ciencias es una comunidad de estudiantes y amantes de la ciencia en la que puedes resolver tus problemas y dudas.
Puedes consultar las preguntas de otros usuarios, hacer tus propias preguntas o resolver las de los demás.

Powered by:

X