tensorflow:: ops:: SparseApplyMomentum

#include <training_ops.h>

Zaktualizuj odpowiednie wpisy w '*var' i '*accum' zgodnie ze schematem momentum.

Streszczenie

Ustaw use_nesterov = True, jeśli chcesz wykorzystać pęd Nesterova.

W przypadku wierszy, dla których wykonaliśmy grad, aktualizujemy var i accum w następujący sposób:

$$accum = accum * momentum + grad$$ $$var -= lr * accum$$

Argumenty:

  • zakres: obiekt zakresu
  • var: Powinien pochodzić ze zmiennej Variable().
  • accum: Powinno pochodzić ze zmiennej Variable().
  • lr: Współczynnik uczenia. Musi być skalarem.
  • grad: Gradient.
  • indeksy: Wektor indeksów do pierwszego wymiaru var i accum.
  • pęd: Pęd. Musi być skalarem.

Atrybuty opcjonalne (patrz Attrs ):

  • use_locking: Jeśli True , aktualizacja tensorów var i accum będzie chroniona blokadą; w przeciwnym wypadku zachowanie jest niezdefiniowane, ale może wykazywać mniejszą niezgodność.
  • use_nesterov: Jeśli True , tensor przekazany do obliczenia grad będzie wynosił var - lr * momentum * accum, więc ostatecznie otrzymany var to w rzeczywistości var - lr * momentum * accum.

Zwroty:

  • Output : To samo co „var”.

Konstruktory i destruktory

SparseApplyMomentum (const :: tensorflow::Scope & scope, :: tensorflow::Input var, :: tensorflow::Input accum, :: tensorflow::Input lr, :: tensorflow::Input grad, :: tensorflow::Input indices, :: tensorflow::Input momentum)
SparseApplyMomentum (const :: tensorflow::Scope & scope, :: tensorflow::Input var, :: tensorflow::Input accum, :: tensorflow::Input lr, :: tensorflow::Input grad, :: tensorflow::Input indices, :: tensorflow::Input momentum, const SparseApplyMomentum::Attrs & attrs)

Atrybuty publiczne

operation
out

Funkcje publiczne

node () const
::tensorflow::Node *
operator::tensorflow::Input () const
operator::tensorflow::Output () const

Publiczne funkcje statyczne

UseLocking (bool x)
UseNesterov (bool x)

Struktury

tensorflow:: ops:: SparseApplyMomentum:: Attrs

Opcjonalne settery atrybutów dla SparseApplyMomentum .

Atrybuty publiczne

działanie

Operation operation

na zewnątrz

::tensorflow::Output out

Funkcje publiczne

RozrzedzonyZastosujMomentum

 SparseApplyMomentum(
  const ::tensorflow::Scope & scope,
  ::tensorflow::Input var,
  ::tensorflow::Input accum,
  ::tensorflow::Input lr,
  ::tensorflow::Input grad,
  ::tensorflow::Input indices,
  ::tensorflow::Input momentum
)

RozrzedzonyZastosujMomentum

 SparseApplyMomentum(
  const ::tensorflow::Scope & scope,
  ::tensorflow::Input var,
  ::tensorflow::Input accum,
  ::tensorflow::Input lr,
  ::tensorflow::Input grad,
  ::tensorflow::Input indices,
  ::tensorflow::Input momentum,
  const SparseApplyMomentum::Attrs & attrs
)

węzeł

::tensorflow::Node * node() const 

operator::tensorflow::Input

 operator::tensorflow::Input() const 

operator::tensorflow::Output

 operator::tensorflow::Output() const 

Publiczne funkcje statyczne

Użyj blokady

Attrs UseLocking(
  bool x
)

Użyj Nesterova

Attrs UseNesterov(
  bool x
)