flux tensoriel : : opérations : : AppliquerProximalAdagrad
#include <training_ops.h>
Mettez à jour '*var' et '*accum' selon FOBOS avec le taux d'apprentissage d'Adagrad.
Résumé
accumulation += grad * grad prox_v = var - lr * grad * (1 / sqrt(accum)) var = sign(prox_v)/(1+lr*l2) * max{|prox_v|-lr*l1,0}
Arguments :
- scope : un objet Scope
- var : doit provenir d'une variable ().
- cumul : doit provenir d'une variable ().
- lr : facteur d’échelle. Ça doit être un scalaire.
- l1 : régularisation L1. Ça doit être un scalaire.
- l2 : régularisation L2. Ça doit être un scalaire.
- grad : Le dégradé.
Attributs facultatifs (voir Attrs
) :
- use_locking : Si True, la mise à jour des tenseurs var et accum sera protégée par un verrou ; sinon, le comportement n'est pas défini, mais peut présenter moins de conflits.
Retours :
-
Output
: Identique à "var".
Constructeurs et Destructeurs | |
---|---|
ApplyProximalAdagrad (const :: tensorflow::Scope & scope, :: tensorflow::Input var, :: tensorflow::Input accum, :: tensorflow::Input lr, :: tensorflow::Input l1, :: tensorflow::Input l2, :: tensorflow::Input grad) | |
ApplyProximalAdagrad (const :: tensorflow::Scope & scope, :: tensorflow::Input var, :: tensorflow::Input accum, :: tensorflow::Input lr, :: tensorflow::Input l1, :: tensorflow::Input l2, :: tensorflow::Input grad, const ApplyProximalAdagrad::Attrs & attrs) |
Attributs publics | |
---|---|
operation | |
out |
Fonctions publiques | |
---|---|
node () const | ::tensorflow::Node * |
operator::tensorflow::Input () const | |
operator::tensorflow::Output () const |
Fonctions statiques publiques | |
---|---|
UseLocking (bool x) |
Structures | |
---|---|
tensorflow :: ops :: ApplyProximalAdagrad :: Attrs | Setters d'attributs facultatifs pour ApplyProximalAdagrad . |
Attributs publics
opération
Operation operation
dehors
::tensorflow::Output out
Fonctions publiques
AppliquerProximalAdagrad
ApplyProximalAdagrad( const ::tensorflow::Scope & scope, ::tensorflow::Input var, ::tensorflow::Input accum, ::tensorflow::Input lr, ::tensorflow::Input l1, ::tensorflow::Input l2, ::tensorflow::Input grad )
AppliquerProximalAdagrad
ApplyProximalAdagrad( const ::tensorflow::Scope & scope, ::tensorflow::Input var, ::tensorflow::Input accum, ::tensorflow::Input lr, ::tensorflow::Input l1, ::tensorflow::Input l2, ::tensorflow::Input grad, const ApplyProximalAdagrad::Attrs & attrs )
nœud
::tensorflow::Node * node() const
opérateur :: tensorflow :: Entrée
operator::tensorflow::Input() const
opérateur :: tensorflow :: Sortie
operator::tensorflow::Output() const
Fonctions statiques publiques
UtiliserVerrouillage
Attrs UseLocking( bool x )