Funcin de activacin - Wikipedia, la enciclopedia libre

1 de 2

https://es.wikipedia.org/wiki/Funcin_de_activacin

Funcin de activacin
De Wikipedia, la enciclopedia libre
En redes computacionales, la Funcin de Activacin de un nodo define la salida de un nodo dada una
entrada o un conjunto de entradas. Se podra decir que un circuito estndar de computador se comporta
como una red digital de funciones de activacin al activarse como "ON" (1) u "OFF" (0), dependiendo de la
entrada. Esto es similar al funcionamiento de un Perceptrn en una Red neuronal artificial.

Funciones
En las redes neurales inspiradas sobre la biologa, la funcin de activacin es usualmente una abstraccin
representando una tasa de potencial de activacin gatillndose en la celda. En su forma simplificada, esta
funcin es binaria, esto es, se activa la neurona o no. La funcin se ve como
, donde es la
funcin escaln. En este caso, un gran nmero de neuronas deben ser usadas en computacin ms all de la
separacin lineal de las categoras.
Una funcin rampa tambin puede ser usada para reflejar el incremento del potencial de activacin que
ocurre cuando la entrada se incrementa. La funcin podra ser de la forma
, donde es la
pendiente. Esta funcin de activacin es lineal, y por consiguiente tiene los mismos problemas que la
funcin binaria. En adicin, las redes neurales construidas usando este modelo tienen convergencia inestable
porque a la larga, las entradas a la neurona tienden a incrementarse sin lmite, esta funcin no es
normalizable.
Los problemas mencionados anteriormente, pueden ser manejados usando una funcin de activacin
sigmoidal. Un modelo realstico permanece en cero hasta que una entrada es recibida, en este punto la
frecuencia de activacin se incrementa rpidamente, pero gradualmente llega a ser asntota cuando la
, donde la funcin de
frecuencia es 100%. Matemticamente, esto se ve como
tangente hiperblica puede tambin ser cualquier funcin sigmoidal. Esta conducta es realsticamente
reflejada en la neurona, ya que las neuronas no pueden fsicamente activarse ms rpido que una cierta tasa.
El modelo final que es usado en perceptrones multicapa es el modelo de activacin sigmoidal en la forma de
tangente hiperblica. Dos formas de esta funcin son comnmente usados:
cuyos rangos
son normalizados desde -1 hasta 1, y
es verticalmente normalizado desde 0 a
1. El ltimo modelo es frecuentemente considerado ms biolgicamente realstico, pero tiene dificultades
tericas y experimentales en ciertos tipos de problemas computacionales.

Estructuras alternativas
Una clase especial de funciones de activacin conocidas como Funciones de Base Radial (RBFs) son usadas
en Redes de neuronas de base radial, las cuales son extremadamente eficientes como funciones universales
de aproximacin. Esas funciones de activacin pueden tomar cualquier forma, pero usualmente se
encuentran una de estas tres:
Gausiana:
Multicuadrticas:
Multicuadrticas Inversas:
donde
radio.

es el vector representando la funcin central y

son parmetros affectando la magnitud del

29/06/2016 17:48

Funcin de activacin - Wikipedia, la enciclopedia libre

2 de 2

https://es.wikipedia.org/wiki/Funcin_de_activacin

Mquinas de Soporte Vectorial (SVMs) pueden efectivamente utilizar una clase de funciones de activacin
que incluyen funciones sigmoidales y Funciones de Base Radial. En este caso, el vector de entrada es
transformado para reflejar un lmite de decisin hiplerplano basado en unas pocas entradas de entrenamiento
llamadas vectores de soporte . La funcin de activacin para las capas ocultas de esas maquinas son
referidas como producto del ncleo interno,
. Los vectores de soporte son representados
como los centros en RBFs con el ncleo igual a la funcin de activacin, pero toman una frma nica en el
perceptrn como :

, donde

deben satisfacer ciertas

condiciones de convergencia. Esas mquinas tambin pueden aceptar funciones de polinomios de orden
arbitrario donde:

.1

Referencias
1. Haykin, Simon (1998). Neural Networks: A Comprehensive Foundation (2 edicin). Prentice Hall.
ISBN 0132733501 .

Obtenido de https://es.wikipedia.org/w/index.php?title=Funcin_de_activacin&oldid=89402632
Categora: Redes neuronales artificiales
Esta pgina fue modificada por ltima vez el 25 feb 2016 a las 13:28.
El texto est disponible bajo la Licencia Creative Commons Atribucin Compartir Igual 3.0; podran
ser aplicables clusulas adicionales. Al usar este sitio, usted acepta nuestros trminos de uso y nuestra
poltica de privacidad.
Wikipedia es una marca registrada de la Fundacin Wikimedia, Inc., una organizacin sin nimo de
lucro.

29/06/2016 17:48