Una prueba nula de Chi-cuadrado: ¿qué podría hacerse después?

Question

Tengo una calificación (de 1 a 5) bajo dos condiciones (vamos a llamarlos "azul" y "rojo"). He probado de si la distribución de las calificaciones es significativamente diferente de usar un chi-cuadrado de la prueba de bondad de ajuste. Los resultados de la prueba fueron nulos - el sentido de que yo no podía decir que la distribución de la calificación de la azul y rojo de los grupos es significativamente diferente.

Iba buscando a sólo un parcial sub-grupo de los datos se considera legítimo de cálculo?

Ejemplo: preguntar si la distribución de azul y rojo es diferente sólo por el "1" y "5" calificaciones (sin calificación 2-3-4).

• Si sí: ¿Qué puedo probar?
• Si no: ¿Cuál es el problema con ese examen?

Answer 1

Usted puede hacerlo, pero la prueba de chi-cuadrado en un subconjunto necesariamente no saben sobre el resto de los datos.

El principal problema es que los laicos abiertos a las acusaciones o sospechas de que están siendo selectivo y hacer hincapié en los patrones de muestra solo una parte de los datos.

Considere los siguientes extremos analógica[ue]. Dos variables en un diagrama de dispersión muestran sólo una relación débil. Así que usted seleccione la parte superior derecha e inferior izquierda de puntos de datos y, a continuación, calcular y anunciar una correlación perfecta de $+1$. Buena idea o no?

No está proponiendo nada tan extremo, pero usted está considerando un paso en la misma dirección.

He simpatía con aquellos que sostienen que la importancia de la prueba no tiene sentido útil y el $P$-valor ninguna validez si usted acaba de centrarse en un subconjunto sin una independiente de la razón para hacer eso. Un protocolo de mínimos es explicar exactamente lo que usted hizo y exactamente por qué se hace tanto a científicos y estadísticos sentido. En la cara de ella, no.

Answer 2

De hecho, existen situaciones en las que el sub-grupo de análisis es válido, pero debe haber una clara justificación científica para él más allá de que su principal prueba no funcionó. su pregunta sugiere que su deseo no surge de un pensamiento bien hacia fuera argumento en el que caso de que la respuesta es no, no la prueba de la sub-grupo.

Porque ya se ha llevado a cabo una prueba estadística y usted está buscando para aplicar otra que tendría que aplicar una hipótesis múltiple de corrección como FDR o de Bonferroni. Esto es debido a que cada prueba tiene un riesgo de un falso positivo y el más pruebas llevadas a cabo más posibilidades de un falso rechazo de una hipótesis nula.

Answer 3

Habría estado bien tenía el subgrupo preespecificado - que tenía una razón para investigar, y lo dijo antes de que la mirase a los datos (y representaron varias pruebas, etc)

Ahora que has mirado los datos, el análisis adicional de los datos es de dragado -, mientras que el análisis podría conducir a la generación de hipótesis, no debería sacar conclusiones.

Si desea sacar conclusiones, tendrá que recoger un nuevo conjunto de datos.

(Por cierto, ¿cuál es el problema con que muestra que no hay efecto significativo? Que a menudo es útil saber)