Estoy teniendo un argumento con un colega (ninguno de los dos tiene una experiencia sólida en estadística / métodos de investigación) sobre si deberíamos aleatorizar el diseño del cuestionario.
La encuesta en cuestión es una serie de formularios de retroalimentación sobre el desempeño de los profesores que se distribuyen a los alumnos de secundaria. Así que un alumno recibe hasta 20 encuestas (sobre cada profesor con el que tiene contacto) que tienen preguntas idénticas de opción múltiple. La mayoría de las preguntas también tienen una escala idéntica. El alumno completa las encuestas en línea y no necesariamente tiene que hacer todo de una vez (pero definitivamente puede). No tenemos control sobre cómo / cuándo deciden hacerlo.
Mi colega argumenta que al aleatorizar el orden de las preguntas reducimos la posibilidad de que los alumnos llenen los cuestionarios sin pensar demasiado, por ejemplo, si llena 5 formularios a la vez, las evaluaciones de los profesores serán muy similares.
En mi opinión, sin embargo, realmente ganaríamos al asegurarnos de que las preguntas de la encuesta estén agrupadas según el área de pregunta (por ejemplo, habilidades de comunicación del profesor, uso de la tecnología, etc.) - esto garantizaría que los alumnos proporcionen respuestas consistentes.
Supongo que hay un punto en ambas aproximaciones, pero tal vez haya algunas mejores prácticas sobre cómo lidiar con eso?
Ah, y si alguien pudiera encontrar algunas referencias, eso sería genial. A mi colega le gustan los hechos :)
