実はずーーと、分かっていない事があります:
『オンライン学習』と『確率的勾配法』とは何が違うの?
もし同じであれば、どうして『確率的勾配法』が新しい方法みたいに扱われているのでしょうか。
【回答】(from tachikomaさま)
『オンライン学習』と『確率的勾配法』とはまったく異なる範疇の概念で、
1.『オンライン学習・訓練』は 学習データを徐々(逐次的)に(sequentially)取得して、一度学習した後追加学習を行う;その他の学習法では予めサンプルが揃っている。
2.『オンライン学習・訓練』にも複数の最適化方法を選択可能:
Eg, 学習データを暫く溜めといて、『確率的勾配法』以外の任意の学習法(eg., mini-batch)を選べる。
3.『オンライン学習・訓練』はNNに限らず、例えば、ベイジアンモデルのオンライン学習も存在する。
回答1件
あなたの回答
tips
プレビュー
バッドをするには、ログインかつ
こちらの条件を満たす必要があります。
2018/08/04 13:50
2018/08/04 14:15
2018/08/04 14:17
2018/08/04 14:20
2018/08/06 22:55