tensorflow:: ops:: SparseApplyProximalGradientDescent
#include <training_ops.h>निश्चित लर्निंग रेट के साथ FOBOS एल्गोरिदम के रूप में स्पार्स अपडेट '*var'।
सारांश
यानी जिन पंक्तियों के लिए हमारे पास ग्रेडिएंट है, हम वेरिएबल को निम्नानुसार अपडेट करते हैं:
$$prox_v = var - alpha * grad$$
$$var = sign(prox_v)/(1+alpha*l2) * max{|prox_v|-alpha*l1,0}$$
तर्क:
- स्कोप: एक स्कोप ऑब्जेक्ट
- var: यह एक Variable() से होना चाहिए।
- अल्फा: स्केलिंग फैक्टर। यह एक स्केलर होना चाहिए।
- l1: L1 नियमितीकरण। यह एक अदिश राशि होनी चाहिए।
- l2: L2 नियमितीकरण। यह एक अदिश राशि होनी चाहिए।
- ग्रेड: प्रवणता।
- सूचकांक: var और accum के पहले आयाम में सूचकांकों का एक सदिश।
वैकल्पिक विशेषताएँ (देखें Attrs ):
- use_locking: यदि True है, तो घटाव को लॉक द्वारा सुरक्षित किया जाएगा; अन्यथा व्यवहार अपरिभाषित है, लेकिन इसमें कम टकराव हो सकता है।
प्रतिफल:
-
Output: "var" के समान।
कंस्ट्रक्टर और डिस्ट्रक्टर | |
|---|---|
SparseApplyProximalGradientDescent (const :: tensorflow::Scope & scope, :: tensorflow::Input var, :: tensorflow::Input alpha, :: tensorflow::Input l1, :: tensorflow::Input l2, :: tensorflow::Input grad, :: tensorflow::Input indices) | |
SparseApplyProximalGradientDescent (const :: tensorflow::Scope & scope, :: tensorflow::Input var, :: tensorflow::Input alpha, :: tensorflow::Input l1, :: tensorflow::Input l2, :: tensorflow::Input grad, :: tensorflow::Input indices, const SparseApplyProximalGradientDescent::Attrs & attrs) |
सार्वजनिक विशेषताएँ | |
|---|---|
operation | |
out | |
सार्वजनिक समारोह | |
|---|---|
node () const | ::tensorflow::Node * |
operator::tensorflow::Input () const | |
operator::tensorflow::Output () const | |
सार्वजनिक स्थैतिक फ़ंक्शन | |
|---|---|
UseLocking (bool x) | |
संरचनाएँ | |
|---|---|
| टेन्सरफ्लो::ऑप्स::स्पार्सअप्लाईप्रॉक्सिमलग्रेडिएंटडिसेंट::एट्रिब्यूट्स | SparseApplyProximalGradientDescent के लिए वैकल्पिक विशेषता निर्धारक। |
सार्वजनिक विशेषताएँ
संचालन
Operation operation
बाहर
::tensorflow::Output out
सार्वजनिक समारोह
स्पार्सअप्लाईप्रॉक्सिमलग्रेडिएंटडिसेंट
SparseApplyProximalGradientDescent( const ::tensorflow::Scope & scope, ::tensorflow::Input var, ::tensorflow::Input alpha, ::tensorflow::Input l1, ::tensorflow::Input l2, ::tensorflow::Input grad, ::tensorflow::Input indices )
स्पार्सअप्लाईप्रॉक्सिमलग्रेडिएंटडिसेंट
SparseApplyProximalGradientDescent( const ::tensorflow::Scope & scope, ::tensorflow::Input var, ::tensorflow::Input alpha, ::tensorflow::Input l1, ::tensorflow::Input l2, ::tensorflow::Input grad, ::tensorflow::Input indices, const SparseApplyProximalGradientDescent::Attrs & attrs )
नोड
::tensorflow::Node * node() const
ऑपरेटर::टेन्सरफ्लो::इनपुट
operator::tensorflow::Input() const
ऑपरेटर::टेन्सरफ्लो::आउटपुट
operator::tensorflow::Output() const
सार्वजनिक स्थैतिक फ़ंक्शन
यूज़लॉकिंग
Attrs UseLocking( bool x )