Straight-Through Estimatorが分からなかったので調べてみた.八谷大岳の覚え書きブログには
”絶対値が1以下の勾配のみ用いて更新する”
とある.Quoraには
you just estimate that the incoming gradient to a thresholder is equal to the outgoing gradient.
とある.この二つが同じことを言っているとすると,バックプロパゲーションのときに上流から流れてくる勾配は+1と-1(と0もか?)で,それをそのまま下流に流すということになる.うーむ,元の文献(ビデオ)を見てもはっきり分からない.どうすりゃいいのよ.