Cómo disuadir a los seglares de dibujo conclusiones erróneas acerca de sus datos?

Question

Yo trabajo como analista de datos, principalmente en SQL, proporcionando los datos de las operaciones a los clientes internos. Raramente hago análisis estadístico.

Recientemente, clientes internos, han venido a mí con datos de mal diseño de los proyectos (sin grupo de control, no hay metodología planificada, etc) y me pide hacer el análisis de los datos sobre sus resultados, de modo que puede utilizar para dar forma a sus prácticas de negocios.

Los "estudios" son muy rudimentarios, ejecutado por personas que no tienen conocimiento de los métodos de investigación o estadísticas, y tratando de influir en importantes prácticas de negocios. Yo no puedo hacer un análisis estadístico debido a que no fue diseñado desde el principio.

Qué recursos podría apuntar a ellos para hacerles saber sus "estudios" no pueden ser generalizados más allá de la población involucrada? ¿En qué idioma puedo usar para esto?

Answer 1

Me gustaría que lo había proporcionado más detalles en su pregunta, pero yo sólo voy a contestar con toda la información que usted ha proporcionado.

Creo que es poco probable que se vaya de vuelta y, de hecho, leer el de "recursos" que sugieren, por lo que podría ser mejor con la lectura sobre estos sí mismo y tratando de explicarlo con ejemplos. Usted podrá informar acerca de cómo se podría haber diseñado el experimento, en primer lugar, tal vez con un ejemplo de Una prueba a/B (retirar en la wikipedia), y cómo es imperativo que la muestra es representativa de la población. Enlaces: https://en.wikipedia.org/wiki/Design_of_experiments

También, listado de algunas de las posibles dificultades de sacar conclusiones de lo que estadísticamente precariedad de los experimentos deben ayudarles a entender su punto. Enlace: http://www.ch.embnet.org/CoursEMBnet/Arrays06/files/arrays06_ExpDes2.pdf