¿Estoy provocando infracciones estadísticas?

Question

Intento analizar dónde se encuentran las diferencias significativas entre 2 conjuntos de series temporales. El grupo 1 (Experto) tiene 29 ensayos normalizados a 256 puntos, mientras que el grupo 2 (Novato) tiene 19 ensayos (véase la captura de pantalla adjunta). Básicamente, he realizado pruebas t en cada uno de los 256 puntos temporales y sólo he representado (gráfico verde) los datos que son significativos a p<=0,05.

En algún lugar de mi cabeza pienso que estoy introduciendo un error con estas pruebas t repetidas.

¿Alguien puede comentar si se puede o no hacer este planteamiento? Gracias de antemano.

Answer 1

Si no se corrigen las comparaciones múltiples, algunas de las diferencias significativas son meros falsos positivos. Puede probar la corrección de Bonferroni, que le proporciona un nuevo nivel crítico $$\alpha=\frac{0.05}{N} = \frac{0.05}{256}=0.0001.$$

Sin embargo, es una técnica conservadora (puede introducir falsos negativos).