Reducción de un grupo de 175 solicitantes a una lista de 20 solicitantes a partir de evaluaciones de 3 factores

Question

Estoy presidiendo un comité de búsqueda para un puesto académico. Tenemos un grupo de 175 candidatos y un comité de 5 que clasificará a cada candidato en tres factores diferentes, utilizando puntuaciones de 1 (la más baja) a 4 (la más alta). He animado a los evaluadores a utilizar más 2 y 3 y menos 1 y 4. Cuando los evaluadores terminen su trabajo, me gustaría reducir el grupo de 175 a una lista de 20-25. Me gustaría asegurarme de que estos tienen puntuaciones altas en todos los evaluadores, y también quiero asegurarme de que cada evaluador hace contribuciones igualmente sustanciales a la lista de 20-25. Por último, quiero tener en cuenta las diferentes desviaciones estándar de los evaluadores. Tengo previsto trabajar en R y tengo un conocimiento intermedio de estadística. ¿Existen técnicas estadísticas que se consideren las mejores prácticas en esta situación?

Answer 1

¿Qué tal algo como esto?

n = 175 # number of applicants

# generate dummy marks 
marks = data.frame(id = c(seq(1,175)), c1 = round(runif(n)*3+1,0), c2 = round(runif(n)*3+1,0), c3 = round(runif(n)*3+1,0),
                       c4 = round(runif(n)*3+1,0), c5 = round(runif(n)*3+1,0))
# compute mean per candidate
marks$mean = (marks$c1 + marks$c2 + marks$c3 + marks$c4 + marks$c5)/5

# compute sum per candidate 
marks$sum = marks$c1 + marks$c2 + marks$c3 + marks$c4 + marks$c5

# compute sd per candidate 
marks$sd = sd(c(marks$c1, marks$c2, marks$c3, marks$c4, marks$c5))

#order data
ranking = marks[order(marks[,"mean"], marks[,"sum"], marks[,"sd"], marks[,"c1"],marks[,"c2"], marks[,"c3"],
                      marks[,"c4"], marks[,"c5"], decreasing = TRUE ), ]

Con la última línea se ordena el marco de datos según varias columnas. Por el momento, establezco la evaluación media como la de mayor prioridad.

Para asegurarse de que da la misma importancia a todos los miembros del comité, puede ordenar el marco de datos varias veces permutando el orden de los miembros del comité y seleccionar cada vez los 25 mejores candidatos.

Para la decisión final se toman los 25 que aparecen el mayor número de veces.