SELU

klasa publiczna SELU

Skalowana wykładnicza jednostka liniowa (SELU).

Funkcja aktywacji skalowanej wykładniczej jednostki liniowej (SELU) jest zdefiniowana jako:

• if x > 0: return scale * x
• if x < 0: return scale * alpha * (exp(x) - 1)

gdzie alpha i scale są predefiniowanymi stałymi ( alpha=1.67326324 i scale=1.05070098 ).

Zasadniczo funkcja aktywacji SELU mnoży scale (> 1) przez sygnał wyjściowy funkcji elu, aby zapewnić nachylenie większe niż jedność dla wejść dodatnich.

Wartości alpha i scale są dobierane w taki sposób, aby średnia i wariancja danych wejściowych zostały zachowane pomiędzy dwiema kolejnymi warstwami, o ile wagi są poprawnie zainicjowane (patrz LeCun z rozkładem normalnym), a liczba jednostek wejściowych jest „wystarczająco duża”

Uwagi: Do użycia razem z inicjatorem LeCun z rozkładem normalnym.

Zobacz też

• Klambauer i in., 2017

Konstruktorzy publiczni

SELU (Ops tf) Tworzy aktywację skalowanej wykładniczej jednostki liniowej (SELU).

Metody publiczne

Argument <T>

wywołanie (wejście argumentu <T>) Pobiera operację obliczeniową dla aktywacji.

Metody dziedziczone

Z klasy org.tensorflow.framework.activations.Activation

abstrakcyjny argument <T>

wywołanie (wejście argumentu <T>) Pobiera operację obliczeniową dla aktywacji.

Z klasy java.lang.Object

wartość logiczna	równa się (Obiekt arg0)
ostatnia klasa<?>	pobierzKlasę ()
wew	hashCode ()
ostateczna pustka	powiadomić ()
ostateczna pustka	powiadom wszystkich ()
Strunowy	doString ()
ostateczna pustka	czekaj (długi arg0, int arg1)
ostateczna pustka	czekaj (długi arg0)
ostateczna pustka	Czekać ()

Konstruktorzy publiczni

publiczne SELU (Ops tf)

Tworzy aktywację skalowanej wykładniczej jednostki liniowej (SELU).

Parametry

tf	operacji TensorFlow

Metody publiczne

publiczne wywołanie argumentu <T> (wejście argumentu <T>)

Pobiera operację obliczeniową dla aktywacji.

Parametry

wejście	tensor wejściowy

Zwroty

• Operand aktywacji