回答編集履歴
1
補足を追加
answer
CHANGED
|
@@ -3,4 +3,9 @@
|
|
|
3
3
|
[重みの初期化](https://nnadl-ja.github.io/nnadl_site_ja/chap3.html#weight_initialization)
|
|
4
4
|
|
|
5
5
|
で、一様分布を積極的に使う理由は分かりませんが、少なくとも正規分布よりは直感的には偏差は大きくならないと私は理解してます。
|
|
6
|
-
一方バイアスは、上記の説明のとおりどんな値で初期化しても学習の進み具合には影響ないようです。
|
|
6
|
+
一方バイアスは、上記の説明のとおりどんな値で初期化しても学習の進み具合には影響ないようです。
|
|
7
|
+
|
|
8
|
+
##### 補足
|
|
9
|
+
上記に挙げた日本語のサイトでは分布の図がありませんが、元サイトは分布の図が載っています。
|
|
10
|
+
図を見たほうが理解しやすいかと思います。
|
|
11
|
+
[Improving the way neural networks learn](http://neuralnetworksanddeeplearning.com/chap3.html)
|