"*var" را طبق الگوریتم Adam به روز کنید.
$$\text{lr}_t := \mathrm{learning_rate} * \sqrt{1 - \beta_2^t} / (1 - \beta_1^t)$$$$m_t := \beta_1 * m_{t-1} + (1 - \beta_1) * g$$$$v_t := \beta_2 * v_{t-1} + (1 - \beta_2) * g * g$$$$\text{variable} := \text{variable} - \text{lr}_t * m_t / (\sqrt{v_t} + \epsilon)$$
کلاس های تو در تو
کلاس | ResourceApplyAdam.Options | ویژگی های اختیاری برای ResourceApplyAdam |
ثابت ها
رشته | OP_NAME | نام این عملیات، همانطور که توسط موتور هسته TensorFlow شناخته می شود |
روش های عمومی
static <T TType > ResourceApplyAdam را گسترش می دهد | ایجاد ( Scope scope، Operand <?> var، Operand <?> m، Operand <?> v، Operand <T> beta1Power، Operand <T> beta2Power، Operand <T> lr، Operand <T> beta1، Operand <T > beta2، Operand <T> epsilon، Operand <T> grad، Options... گزینهها) روش کارخانه برای ایجاد کلاسی که یک عملیات ResourceApplyAdam جدید را بسته بندی می کند. |
استاتیک ResourceApplyAdam.Options | useLocking (قفل کردن استفاده بولی) |
استاتیک ResourceApplyAdam.Options | useNesterov (استفاده بولی Nesterov) |
روش های ارثی
ثابت ها
رشته نهایی ثابت عمومی OP_NAME
نام این عملیات، همانطور که توسط موتور هسته TensorFlow شناخته می شود
روش های عمومی
ایجاد منبع استاتیک عمومی ResourceApplyAdam ( محدوده دامنه ، عملوند <?> var، عملوند <?> m، عملوند <?> v، عملوند <T> beta1Power، عملوند <T> beta2Power، عملوند <T> lr، عملوند <T> بتا1، Operand <T> beta2، Operand <T> epsilon، Operand <T> grad، Options... گزینهها)
روش کارخانه برای ایجاد کلاسی که یک عملیات ResourceApplyAdam جدید را بسته بندی می کند.
پارامترها
دامنه | محدوده فعلی |
---|---|
var | باید از یک متغیر () باشد. |
متر | باید از یک متغیر () باشد. |
v | باید از یک متغیر () باشد. |
beta1Power | باید اسکالر باشد. |
beta2Power | باید اسکالر باشد. |
lr | ضریب پوسته پوسته شدن باید اسکالر باشد. |
بتا 1 | عامل حرکت. باید اسکالر باشد. |
بتا2 | عامل حرکت. باید اسکالر باشد. |
اپسیلون | ترم ریج. باید اسکالر باشد. |
درجه | گرادیان. |
گزینه ها | مقادیر ویژگی های اختیاری را حمل می کند |
برمی گرداند
- یک نمونه جدید از ResourceApplyAdam
عمومی استاتیک ResourceApplyAdam.Options useLocking (useLocking بولی)
پارامترها
استفاده از قفل کردن | اگر «درست» باشد، بهروزرسانی تانسورهای var، m و v توسط یک قفل محافظت میشود. در غیر این صورت رفتار تعریف نشده است، اما ممکن است اختلاف کمتری از خود نشان دهد. |
---|
Public Static ResourceApplyAdam.Options useNesterov (Boolean useNesterov)
پارامترها
استفاده از نستروف | اگر «درست» باشد، از بهروزرسانی nesterov استفاده میکند. |
---|