Conozca lo último en aprendizaje automático, IA generativa y más en el
Simposio WiML 2023.
SELU
Organiza tus páginas con colecciones
Guarda y categoriza el contenido según tus preferencias.
Unidad lineal exponencial escalada (SELU).
La función de activación de la unidad lineal exponencial escalada (SELU) se define como:
-
if x > 0: return scale * x -
if x < 0: return scale * alpha * (exp(x) - 1)
donde alpha y scale son constantes predefinidas ( alpha=1.67326324 y scale=1.05070098 ).
Básicamente, la función de activación SELU multiplica la scale (> 1) con la salida de la función elu para asegurar una pendiente mayor que uno para entradas positivas.
Los valores de alpha y scale se eligen de modo que la media y la varianza de las entradas se conserven entre dos capas consecutivas siempre que los pesos se inicialicen correctamente (ver LeCun con distribución normal) y el número de unidades de entrada sea "suficientemente grande"
Notas: Para usar junto con el inicializador LeCun con distribución normal.
Constructores públicos
| SELU (Operaciones tf) Crea una activación de Unidad lineal exponencial escalada (SELU). |
Métodos heredados
De la clase java.lang.Object | booleano | es igual a (Objeto arg0) |
| Clase final <?> | getClass () |
| En t | hashCode () |
| vacío final | notificar () |
| vacío final | notificar a todos () |
| Cuerda | toString () |
| vacío final | esperar (largo arg0, int arg1) |
| vacío final | espera (largo arg0) |
| vacío final | esperar () |
Constructores públicos
SELU pública (Ops tf)
Crea una activación de Unidad lineal exponencial escalada (SELU).
Parámetros
| tf | las operaciones de TensorFlow |
|---|
Métodos públicos
Obtiene la operación de cálculo para la activación.
Parámetros
| aporte | el tensor de entrada |
|---|
Devoluciones
- El operando para la activación
Salvo que se indique lo contrario, el contenido de esta página está sujeto a la licencia Atribución 4.0 de Creative Commons, y los ejemplos de código están sujetos a la licencia Apache 2.0. Para obtener más información, consulta las políticas del sitio de Google Developers. Java es una marca registrada de Oracle o sus afiliados.
Última actualización: 2021-04-01 (UTC)
[[["Fácil de comprender","easyToUnderstand","thumb-up"],["Resolvió mi problema","solvedMyProblem","thumb-up"],["Otro","otherUp","thumb-up"]],[["Falta la información que necesito","missingTheInformationINeed","thumb-down"],["Muy complicado o demasiados pasos","tooComplicatedTooManySteps","thumb-down"],["Desactualizado","outOfDate","thumb-down"],["Problema de traducción","translationIssue","thumb-down"],["Problema con las muestras o los códigos","samplesCodeIssue","thumb-down"],["Otro","otherDown","thumb-down"]],["Última actualización: 2021-04-01 (UTC)"],[],[]]
