ニューラルネットワークの学習で過剰適合を起こさせないために、誤差にL2ノルムを加算するようですが、誤差逆伝播での実装方法がわかりません。
回帰の場合、通常では誤差項をEとすると、
E = 1/2 * (t - y)^2
で、その偏微分dEは
dE = t - y
となりますが、L2ノルムを足した場合はどのような逆伝播の式になるのでしょうか。
回答1件
あなたの回答
tips
プレビュー
投稿2018/11/15 01:16
編集2018/11/15 01:17ニューラルネットワークの学習で過剰適合を起こさせないために、誤差にL2ノルムを加算するようですが、誤差逆伝播での実装方法がわかりません。
回帰の場合、通常では誤差項をEとすると、
E = 1/2 * (t - y)^2
で、その偏微分dEは
dE = t - y
となりますが、L2ノルムを足した場合はどのような逆伝播の式になるのでしょうか。
回答1件
あなたの回答
tips
プレビュー
バッドをするには、ログインかつ
こちらの条件を満たす必要があります。