Encontrar la mejor receta de galletas. Hyper-parámetro optimización utilizando comparación local ruidoso

Question

Yo estaba viendo la ciencia aplicada explorar el espacio de estado mientras que la toma de cookies en este video https://youtu.be/8YEdHjGMeho. Él fue la creación de todo manualmente, y parece que fue la búsqueda de un 10 dimensiones de la receta de espacio.

Estaba pensando que es muy difícil dar con una constante de puntuación para cada cookie gusto, pero usted puede fácilmente rango de pares de cookies probado.

¿Cómo podría alguien optimizar hyper-parámetros en un marco donde no hay ninguna puntuación global de la función. Sólo un ruidoso rango entre dos puntos. Creo que es justo asumir elección es transitivo y que su sabor no cambia mucho a lo largo de este experimento.

Parece que su función puede ejecutar en lotes de 20 a 30 puntos en un tiempo, pero hay una muy alta latencia para cada lote.

Answer 1

Si usted está interesado en el uso (más que en el desarrollo), usted debe darle una oportunidad a rankade, nuestro sistema de ranking. Rankade es gratis y fácil de usar, puede manejar, de pequeño a grande jugando en grupos (compuesto por los jugadores o 'cookies', según sus necesidades, o lo que sea), y cuenta con la clasificación, las estadísticas, y mucho más. No cubre todos los de sus tareas, tal vez, pero debe ser útil para clasificar a $n$ cookies de mejor a peor, tanto globales y parciales de las clasificaciones.

Los fantasmas de la función que permite crear un grupo sin ningún tipo de cuenta, pero su. Rankade del algoritmo puede administrar, dentro de los diferentes ámbitos, cualquier tipo de partido. Debido a la facción de la estructura, puede salidas de grabación de 1 en 1 o de comparación para 2+ artículos (incluso mezclando ambos tipos de 'partidos'), mientras que Bradley-Terry modelo u otro sistema de clasificación (como la mayoría de los conocidos Elo o Glicko - he aquí una comparación) no. Es sin duda cierto que es bastante difícil dar una constante de puntuación para cada galleta con el gusto, pero una comparación múltiple (por ejemplo, 3-6 cookies por 'match') debe ser adecuado y útil en su trabajo. Si usted tiene más de un probador con diferentes fiabilidad, puede utilizar el peso de la característica para su 'partidos'.