Me gustaría usar la prueba DM para un caso de pronóstico probabilístico. Mi pensamiento inicial era dar CRPS de dos métodos de pronóstico en lugar de errores de pronóstico crudos, donde CRPS se calcula usando un intervalo de predicción construido bajo suposición paramétrica (Gaussiano).
Supongamos que tengo 100 observaciones (y)
y 100 pronósticos puntuales del método-1 (f1)
y 100 pronósticos puntuales del método-2 (f2)
. Por lo tanto, tengo CRPS de 100 puntos tanto del método-1 como del método-2, en lugar de errores crudos de 100 puntos (y-f1
y y-f2
). En esta configuración, parece que la prueba DM funciona bien cuando uso CRPS, porque obtuve resultados significativos, pero no pude encontrar ningún artículo que respalde el uso de CRPS u cualquier otra métrica de error (error absoluto, error cuadrado, ...) en lugar de errores crudos. Si mi comprensión es correcta, hay algunos artículos que usan CRPS en lugar de errores crudos, pero estos artículos suelen aparecer en arxiv (probablemente aún no publicados en revistas con revisión por pares). También encontré un paquete de R llamado SpecsVerification
. La función ScoreDiff
parece hacer lo mismo que la definición de la función: Calcular la diferencia (puntuación media del pronóstico de referencia) menos (puntuación media del pronóstico). La incertidumbre se evalúa mediante la prueba de Diebold-Mariano para la igualdad de precisión predictiva.
En resumen, mi pregunta es si puedo usar CRPS en lugar de errores crudos en la prueba DM? ¿O hay alguna alternativa a la prueba DM que permita usar CRPS?