SparseApplyRmsProp

publiczna klasa końcowa SparseApplyRmsProp

Zaktualizuj „*var” zgodnie z algorytmem RMSProp.

Należy zauważyć, że w gęstej implementacji tego algorytmu ms i mama zostaną zaktualizowane, nawet jeśli grad będzie wynosić zero, ale w tej rzadkiej implementacji ms i mama nie będą aktualizować się w iteracjach, podczas których grad będzie wynosić zero.

średnia_kwadrat = zanik * średnia_kwadrat + (1-zanik) * gradient ** 2 Delta = szybkość_uczenia się * gradient / sqrt(średnia_kwadrat + epsilon)

$$ms <- rho * ms_{t-1} + (1-rho) * grad * grad$$ $$mom <- momentum * mom_{t-1} + lr * grad / sqrt(ms + epsilon)$$ $$var <- var - mom$$

Klasy zagnieżdżone

klasa

Opcje SparseApplyRmsProp

Opcjonalne atrybuty dla SparseApplyRmsProp

Stałe

Smyczkowy

OP_NAME

Nazwa tej operacji znana silnikowi rdzenia TensorFlow

Metody publiczne

Wyjście <T>	jako wyjście () Zwraca symboliczny uchwyt tensora.
statyczny <T rozszerza TType > SparseApplyRmsProp <T>	utwórz (Zakres zasięgu , Operand <T> var, Operand <T> ms, Operand <T> mama, Operand <T> lr, Operand <T> rho, Operand <T> pęd, Operand <T> epsilon, Argument <T > grad, Operand <? rozszerza TNumber > indeksy, Opcje... opcje) Metoda fabryczna służąca do tworzenia klasy opakowującej nową operację SparseApplyRmsProp.
Wyjście <T>	na zewnątrz () To samo co „var”.
statyczne SparseApplyRmsProp.Options	useLocking (boolowski useLocking)

Metody dziedziczone

Z klasy org.tensorflow.op.RawOp

końcowa wartość logiczna	równa się (obiekt obiektu)
końcowy wew	hashCode ()
Działanie	op () Zwróć tę jednostkę obliczeniową jako pojedynczą Operation .
ostatni ciąg	doString ()

Z klasy java.lang.Object

wartość logiczna	równa się (Obiekt arg0)
ostatnia klasa<?>	pobierzKlasę ()
wew	hashCode ()
ostateczna pustka	powiadomić ()
ostateczna pustka	powiadom wszystkich ()
Smyczkowy	doString ()
ostateczna pustka	czekaj (długi arg0, int arg1)
ostateczna pustka	czekaj (długi arg0)
ostateczna pustka	Czekać ()

Z interfejsu org.tensorflow.op.Op

abstrakcyjne środowisko wykonania	środowisko () Zwróć środowisko wykonawcze, w którym utworzono tę operację.
abstrakcyjna operacja	op () Zwróć tę jednostkę obliczeniową jako pojedynczą Operation .

Z interfejsu org.tensorflow.Operand

streszczenie Wyjście <T>	jako wyjście () Zwraca symboliczny uchwyt tensora.
streszczenie T	asTensor () Zwraca tensor tego operandu.
abstrakcyjny kształt	kształt () Zwraca (prawdopodobnie częściowo znany) kształt tensora, do którego odnosi się Output tego operandu.
Klasa abstrakcyjna<T>	typ () Zwraca typ tensora tego operandu

Z interfejsu org.tensorflow.ndarray.Shaped

streszczenie wew	ranga ()
abstrakcyjny kształt	kształt ()
abstrakcyjne, długie	rozmiar () Oblicza i zwraca całkowity rozmiar tego kontenera w liczbie wartości.

Stałe

publiczny statyczny końcowy ciąg znaków OP_NAME

Nazwa tej operacji znana silnikowi rdzenia TensorFlow

Wartość stała: „SparseApplyRMSProp”

Metody publiczne

publiczne wyjście <T> asOutput ()

Zwraca symboliczny uchwyt tensora.

Dane wejściowe operacji TensorFlow są wynikami innej operacji TensorFlow. Ta metoda służy do uzyskania symbolicznego uchwytu reprezentującego obliczenia danych wejściowych.

public static SparseApplyRmsProp <T> utwórz (Zakres zakresu , Operand <T> var, Operand <T> ms, Operand <T> mama, Operand <T> lr, Operand <T> rho, Operand <T> pęd, Argument <T > epsilon, Operand <T> grad, Operand <? rozszerza TNumber > indeksy, Opcje... opcje)

Metoda fabryczna służąca do tworzenia klasy opakowującej nową operację SparseApplyRmsProp.

Parametry

zakres	aktualny zakres
odm	Powinno pochodzić ze zmiennej ().
SM	Powinno pochodzić ze zmiennej ().
mama	Powinno pochodzić ze zmiennej ().
lr	Współczynnik skalowania. Musi być skalarem.
rho	Szybkość rozpadu. Musi być skalarem.
epsilon	Termin grzbietowy. Musi być skalarem.
absolwent	Gradient.
indeksy	Wektor indeksów pierwszego wymiaru var, ms i mama.
opcje	przenosi opcjonalne wartości atrybutów

Powroty

• nowa instancja SparseApplyRmsProp

publiczne wyjście <T> out ()

To samo co „var”.

public static SparseApplyRmsProp.Options useLocking (boolean useLocking)

Parametry

użyjBlokowanie	Jeśli `True`, aktualizacja tensorów var, ms i mama jest chroniona blokadą; w przeciwnym razie zachowanie jest niezdefiniowane, ale może wykazywać mniejszą rywalizację.