22 votos

Número mínimo de capas en una red neural profunda

¿En qué momento se empieza clasificar múltiples capas de redes neuronales redes neuronales profundas, como para decirlo de otra manera '¿Cuál es el número mínimo de capas en una red neuronal profunda'?

26voto

Franck Dernoncourt Puntos 2128

"" Es un término de marketing: por lo tanto se puede utilizar siempre que lo necesite comercializar su red neuronal multicapa.

18voto

dontloo Puntos 334

"Profundo"
Uno de los primeros profundo redes neuronales tiene tres densamente conectado capas ocultas (Hinton et al. (2006)).

enter image description here

"Muy Profundo"
En el año 2014, el "muy profundo" VGG netowrks Simonyan et al. (2014) constan de 16+ capas ocultas.

enter image description here

"Muy Profundo"
En 2016 la "muy profundo" residual redes Él et al. (2016) constan de 50 hasta 1.000+ capas ocultas. enter image description here

13voto

Según la literatura,

Schmidhuber, J. (2015). "En lo profundo de Aprendizaje en Redes Neuronales: Una Visión general". Las Redes Neuronales. 61: 85-117. arXiv:1404.7828 libre para leer. doi:10.1016/j.neunet.2014.09.003.

https://en.wikipedia.org/wiki/Deep_learning

Se dice que

No es universalmente acordado umbral de la profundidad de la división superficial de aprendizaje de aprendizaje profundo, pero la mayoría de los investigadores en el campo de de acuerdo en que el aprendizaje profundo se ha múltiple no lineal de las capas de la PAC (> 2) y Schmidhuber considera CAP > 10 a ser muy profundo de aprendizaje

Una cadena de transformaciones, desde la entrada a la salida es una Asignación de créditos o la Ruta de la TAPA. Para una red neuronal feedforward, la profundidad de las Tapas, y por lo tanto la profundidad de la red, es el número de capas ocultas, más uno.

i-Ciencias.com

I-Ciencias es una comunidad de estudiantes y amantes de la ciencia en la que puedes resolver tus problemas y dudas.
Puedes consultar las preguntas de otros usuarios, hacer tus propias preguntas o resolver las de los demás.

Powered by:

X