Esta es una gran pregunta.
La prueba exacta de Fisher es uno de los grandes ejemplos de Fisher, el uso inteligente de diseño experimental, junto con el condicionamiento de datos (básicamente en las tablas con el observado fila y marginales totales) y su ingenio en la búsqueda de distribuciones de probabilidad (aunque este no es el mejor ejemplo, para un mejor ejemplo ver aquí). El uso de ordenadores para calcular la "exacta" p-valores que sin duda ha ayudado a obtener respuestas precisas.
Sin embargo, es difícil de justificar las hipótesis de la prueba exacta de Fisher en la práctica. Porque el llamado "exacto" viene del hecho de que en el "té de la degustación de experiementar" o en las tablas de contingencia de 2x2 caso, el total de fila y de columna total, es decir, los marginales totales corregidos por el diseño. Esta suposición es rara vez se justifica en la práctica. Para la buena referencias ver aquí.
El nombre de "exacto", lo lleva a uno a creer que los p-valores dados por esta prueba son exactos, lo que de nuevo en la mayoría de los casos, desafortunadamente, no es correcto debido a estas razones
- Si los marginales no son fijados por el diseño (lo que ocurre casi todo el tiempo en la práctica), los valores de p será conservador.
- Puesto que la prueba se utiliza una distribución de probabilidad discreta (específicamente, Hyper-distribución geométrica), para ciertos atajos que es imposible calcular la "exacta nulo probabilidades", es decir, p-valor.
En la mayoría de los casos prácticos, utilizando una prueba de razón de verosimilitud o la prueba de Chi-cuadrado no debe dar respuestas muy distintas (p-valor) de una prueba exacta de Fisher. Sí, cuando los marginales son fijos, la prueba exacta de Fisher es una mejor opción, pero esto sucede rara vez. Por lo tanto, utilizando la prueba de Chi-cuadrado de la prueba de razón de verosimilitud siempre es recomendable para las comprobaciones de coherencia.
Ideas similares se aplican cuando el test exacto de Fisher se generaliza a cualquier tabla, que básicamente equivalente para el cálculo Multivariado Hipergeométrica proabilities. Por lo tanto, uno siempre debe tratar de calcular el Chi-cuadrado y el coeficiente de probabilidad de la distribución basada en los valores de p, además de la "exacta" p-valores.