亚洲在线久爱草,狠狠天天香蕉网,天天搞日日干久草,伊人亚洲日本欧美

為了賬號安全,請及時綁定郵箱和手機立即綁定
已解決430363個問題,去搜搜看,總會有你想問的

Tensorflow:如何替換或修改漸變?

Tensorflow:如何替換或修改漸變?

瀟瀟雨雨 2019-12-25 14:56:45
我想替換或修改tensorflow中圖的運算或部分漸變。如果可以在計算中使用現有的梯度,那將是理想的。在某些方面,這與操作相反tf.stop_gradient():我希望添加僅在計算梯度時使用的計算,而不是添加在計算梯度時會忽略的計算。一個簡單的例子就是簡單地通過將梯度乘以常數來縮放比例(但不將正向計算乘以常數)。另一個例子是將梯度裁剪到給定范圍的東西。
查看完整描述

3 回答

?
明月笑刀無情

TA貢獻1828條經驗 獲得超4個贊

使用optimizer.compute_gradients或tf.gradient獲取原始漸變,

然后

最終做您想做的任何事情,請使用optimizer.apply_gradients



查看完整回答
反對 回復 2019-12-25
?
陪伴而非守候

TA貢獻1757條經驗 獲得超8個贊

假設正向計算為


y = f(x)

而您希望它像


y = b(x)

一個簡單的技巧將是:


y = b(x) + tf.stop_gradient(f(x) - b(x))


查看完整回答
反對 回復 2019-12-25
  • 3 回答
  • 0 關注
  • 582 瀏覽
慕課專欄
更多

添加回答

舉報

0/150
提交
取消
微信客服

購課補貼
聯系客服咨詢優惠詳情

幫助反饋 APP下載

慕課網APP
您的移動學習伙伴

公眾號

掃描二維碼
關注慕課網微信公眾號