עזרה להגן על שונית המחסום הגדולה עם TensorFlow על Kaggle הצטרפו אתגר

זרימת טנסור :: אופ :: ResourceSparseApplyKerasMomentum

#include <training_ops.h>

עדכן רשומות רלוונטיות ב- '* var' ו- '* accum' בהתאם לתכנית המומנטום.

סיכום

הגדר use_nesterov = נכון אם אתה רוצה להשתמש במומנטום של Nesterov.

כלומר עבור שורות שיש לנו דרוג עבורן, אנו מעדכנים את var ומצטברים כדלקמן:

לצבור = לצבור * מומנטום - lr * grad var + = לצבור

טענות:

  • היקף: אובייקט Scope
  • var: צריך להיות מתוך משתנה ().
  • accum: צריך להיות מתוך משתנה ().
  • lr: שיעור למידה. חייב להיות סקלרי.
  • דרגה: השיפוע.
  • מדדים: וקטור של מדדים למימד הראשון של var ו- accum.
  • מומנטום: מומנטום. חייב להיות סקלרי.

תכונות אופציונליות (ראה Attrs ):

  • use_locking: אם True , עדכון של טווחי ה- var ו- accum יוגן באמצעות נעילה; אחרת ההתנהגות אינה מוגדרת, אך עשויה להפגין פחות מחלוקת.
  • use_nesterov: אם True , הטנסור שהועבר לחישוב הדרגה יהיה var + momentum * accum, כך שבסופו של דבר, ה- var שאתה מקבל הוא למעשה var + momentum * accum.

החזרות:

קונסטרוקטורים ומשחתנים

ResourceSparseApplyKerasMomentum (const :: tensorflow::Scope & scope, :: tensorflow::Input var, :: tensorflow::Input accum, :: tensorflow::Input lr, :: tensorflow::Input grad, :: tensorflow::Input indices, :: tensorflow::Input momentum)
ResourceSparseApplyKerasMomentum (const :: tensorflow::Scope & scope, :: tensorflow::Input var, :: tensorflow::Input accum, :: tensorflow::Input lr, :: tensorflow::Input grad, :: tensorflow::Input indices, :: tensorflow::Input momentum, const ResourceSparseApplyKerasMomentum::Attrs & attrs)

תכונות ציבוריות

operation

פונקציות ציבוריות

operator::tensorflow::Operation () const

פונקציות סטטיות ציבוריות

UseLocking (bool x)
UseNesterov (bool x)

סטרוקטורים

tensorflow :: ops :: ResourceSparseApplyKerasMomentum :: Attrs

קובעי תכונות אופציונליים עבור ResourceSparseApplyKerasMomentum .

תכונות ציבוריות

מבצע

Operation operation

פונקציות ציבוריות

ResourceSparseApplyKerasMomentum

 ResourceSparseApplyKerasMomentum(
  const ::tensorflow::Scope & scope,
  ::tensorflow::Input var,
  ::tensorflow::Input accum,
  ::tensorflow::Input lr,
  ::tensorflow::Input grad,
  ::tensorflow::Input indices,
  ::tensorflow::Input momentum
)

ResourceSparseApplyKerasMomentum

 ResourceSparseApplyKerasMomentum(
  const ::tensorflow::Scope & scope,
  ::tensorflow::Input var,
  ::tensorflow::Input accum,
  ::tensorflow::Input lr,
  ::tensorflow::Input grad,
  ::tensorflow::Input indices,
  ::tensorflow::Input momentum,
  const ResourceSparseApplyKerasMomentum::Attrs & attrs
)

מפעיל :: זרימת tensor :: פעולה

 operator::tensorflow::Operation() const 

פונקציות סטטיות ציבוריות

UseLocking

Attrs UseLocking(
  bool x
)

השתמש בנסטרוב

Attrs UseNesterov(
  bool x
)