قم بتحديث '*var' وفقًا لخوارزمية Adam.
$$\text{lr}_t := \mathrm{learning_rate} * \sqrt{1 - \beta_2^t} / (1 - \beta_1^t)$$$$m_t := \beta_1 * m_{t-1} + (1 - \beta_1) * g$$$$v_t := \beta_2 * v_{t-1} + (1 - \beta_2) * g * g$$$$\text{variable} := \text{variable} - \text{lr}_t * m_t / (\sqrt{v_t} + \epsilon)$$
فئات متداخلة
| فصل | ResourceApplyAdam.Options | السمات الاختيارية لـ ResourceApplyAdam | |
الثوابت
| خيط | OP_NAME | اسم هذه العملية كما هو معروف بواسطة محرك TensorFlow الأساسي |
الأساليب العامة
| ثابت <T يمتد TType > ResourceApplyAdam | |
| ResourceApplyAdam.Options ثابت | useLocking (استخدام منطقي منطقي) |
| ResourceApplyAdam.Options ثابت | استخدام نيستيروف (استخدام منطقي نيستيروف) |
الطرق الموروثة
الثوابت
السلسلة النهائية الثابتة العامة OP_NAME
اسم هذه العملية كما هو معروف بواسطة محرك TensorFlow الأساسي
الأساليب العامة
إنشاء ResourceApplyAdam ثابت عام (نطاق النطاق ، المعامل <?> var، المعامل <?> m، المعامل <?> v، المعامل <T> beta1Power، المعامل <T> beta2Power، المعامل <T> lr، المعامل <T> beta1، المعامل <T> beta2، المعامل <T> إبسيلون، المعامل <T> غراد، خيارات... خيارات)
طريقة المصنع لإنشاء فئة تغلف عملية ResourceApplyAdam جديدة.
حدود
| نِطَاق | النطاق الحالي |
|---|---|
| فار | يجب أن يكون من متغير (). |
| م | يجب أن يكون من متغير (). |
| ضد | يجب أن يكون من متغير (). |
| beta1Power | يجب أن يكون العددية. |
| beta2Power | يجب أن يكون العددية. |
| lr | عامل التحجيم. يجب أن يكون العددية. |
| بيتا1 | عامل الزخم. يجب أن يكون العددية. |
| بيتا2 | عامل الزخم. يجب أن يكون العددية. |
| إبسيلون | مصطلح ريدج. يجب أن يكون العددية. |
| خريج | التدرج. |
| خيارات | يحمل قيم السمات الاختيارية |
المرتجعات
- مثيل جديد من ResourceApplyAdam
ResourceApplyAdam.Options العام الثابت useLocking (الاستخدام المنطقي)
حدود
| useLocking | إذا كان "صحيحًا"، فسيتم حماية تحديث الموترات var وm وv بواسطة قفل؛ وإلا فإن السلوك غير محدد، ولكنه قد يحمل قدرًا أقل من الخلاف. |
|---|
ResourceApplyAdam.Options العام الثابت useNesterov (المنطقي useNesterov)
حدود
| استخدم نيستيروف | إذا كان "صحيحًا"، يستخدم تحديث Nesterov. |
|---|