tensorflow :: ops :: SparseApplyMomentum
#include <training_ops.h>
Perbarui entri yang relevan di '* var' dan '* akumulasi' sesuai dengan skema momentum.
Ringkasan
Setel use_nesterov = True jika Anda ingin menggunakan momentum Nesterov.
Itu untuk baris yang telah kami tingkatkan, kami memperbarui var dan akumulasi sebagai berikut:
$$accum = accum * momentum + grad$$
$$var -= lr * accum$$
Argumen:
- scope: Objek Scope
- var: Harus dari Variabel ().
- akumulasi: Harus dari Variabel ().
- lr: Kecepatan pembelajaran. Harus skalar.
- grad: Gradien.
- indeks: Vektor indeks ke dalam dimensi pertama var dan akum.
- momentum: Momentum. Harus skalar.
Atribut opsional (lihat Attrs
):
- use_locking: Jika
True
, pembaruan tensor var dan akumulator akan dilindungi oleh kunci; jika tidak, perilakunya tidak ditentukan, tetapi mungkin menunjukkan lebih sedikit pertentangan. - use_nesterov: Jika
True
, tensor yang dilewatkan untuk menghitung grad akan menjadi var - lr * momentum * akumulasi, jadi pada akhirnya, var yang Anda dapatkan sebenarnya adalah var - lr * momentum * akumulasi.
Pengembalian:
-
Output
: Sama seperti "var".
Pembangun dan Penghancur | |
---|---|
SparseApplyMomentum (const :: tensorflow::Scope & scope, :: tensorflow::Input var, :: tensorflow::Input accum, :: tensorflow::Input lr, :: tensorflow::Input grad, :: tensorflow::Input indices, :: tensorflow::Input momentum) | |
SparseApplyMomentum (const :: tensorflow::Scope & scope, :: tensorflow::Input var, :: tensorflow::Input accum, :: tensorflow::Input lr, :: tensorflow::Input grad, :: tensorflow::Input indices, :: tensorflow::Input momentum, const SparseApplyMomentum::Attrs & attrs) |
Atribut publik | |
---|---|
operation | |
out |
Fungsi publik | |
---|---|
node () const | ::tensorflow::Node * |
operator::tensorflow::Input () const | |
operator::tensorflow::Output () const |
Fungsi statis publik | |
---|---|
UseLocking (bool x) | |
UseNesterov (bool x) |
Structs | |
---|---|
tensorflow :: ops :: SparseApplyMomentum :: Attrs | Penyetel atribut opsional untuk SparseApplyMomentum . |
Atribut publik
operasi
Operation operation
di luar
::tensorflow::Output out
Fungsi publik
SparseApplyMomentum
SparseApplyMomentum( const ::tensorflow::Scope & scope, ::tensorflow::Input var, ::tensorflow::Input accum, ::tensorflow::Input lr, ::tensorflow::Input grad, ::tensorflow::Input indices, ::tensorflow::Input momentum )
SparseApplyMomentum
SparseApplyMomentum( const ::tensorflow::Scope & scope, ::tensorflow::Input var, ::tensorflow::Input accum, ::tensorflow::Input lr, ::tensorflow::Input grad, ::tensorflow::Input indices, ::tensorflow::Input momentum, const SparseApplyMomentum::Attrs & attrs )
simpul
::tensorflow::Node * node() const
operator :: tensorflow :: Input
operator::tensorflow::Input() const
operator :: tensorflow :: Keluaran
operator::tensorflow::Output() const
Fungsi statis publik
UseLocking
Attrs UseLocking( bool x )
UseNesterov
Attrs UseNesterov( bool x )