質問編集履歴
6
layer=self.l1のみ使用を追加
title
CHANGED
|
File without changes
|
body
CHANGED
|
@@ -53,9 +53,14 @@
|
|
|
53
53
|
####Adam デフォルト エポック数 2000
|
|
54
54
|
|
|
55
55
|
|
|
56
|
-
###
|
|
56
|
+
###Adamの挙動確認 layer =self.l1のみ(Sigmoid不使用)、BCEWithLogitsLoss使用
|
|
57
57
|
|
|
58
|
+
####Adam デフォルト エポック数 500
|
|
59
|
+
|
|
58
60
|
|
|
61
|
+
####Adam デフォルト エポック数 2000
|
|
62
|
+
|
|
63
|
+
|
|
59
64
|
### 該当のソースコード
|
|
60
65
|
|
|
61
66
|
```python
|
5
BCEWithLogitsLossの場合を追加
title
CHANGED
|
File without changes
|
body
CHANGED
|
@@ -14,6 +14,7 @@
|
|
|
14
14
|
0 1073
|
|
15
15
|
1 197
|
|
16
16
|
|
|
17
|
+
###BCELoss使用
|
|
17
18
|
####SGD lr =0.005 エポック数 500
|
|
18
19
|
|
|
19
20
|
|
|
@@ -28,12 +29,33 @@
|
|
|
28
29
|
|
|
29
30
|
|
|
30
31
|
####Adam デフォルト エポック数 500
|
|
31
|
-
|
|
32
33
|
|
|
33
34
|
####Adam デフォルト エポック数 2000
|
|
34
|
-
|
|
35
36
|
|
|
37
|
+
###--------------------------追記(修正依頼参照)--------------------------
|
|
38
|
+
### BCEWithLogitsLoss使用
|
|
39
|
+
####SGD lr =0.005 エポック数 500
|
|
40
|
+
|
|
41
|
+
####SGD lr =0.005 エポック数 2000
|
|
42
|
+
|
|
36
43
|
|
|
44
|
+
####SGD lr =0.001 エポック数 500
|
|
45
|
+
|
|
46
|
+
|
|
47
|
+
####SGD lr =0.001 エポック数 2000
|
|
48
|
+
|
|
49
|
+
|
|
50
|
+
####Adam デフォルト エポック数 500
|
|
51
|
+
|
|
52
|
+
|
|
53
|
+
####Adam デフォルト エポック数 2000
|
|
54
|
+
|
|
55
|
+
|
|
56
|
+
###--------------------------追記終了--------------------------
|
|
57
|
+
|
|
58
|
+
|
|
37
59
|
### 該当のソースコード
|
|
38
60
|
|
|
39
61
|
```python
|
4
エポック数が2000の場合を追記
title
CHANGED
|
File without changes
|
body
CHANGED
|
@@ -14,15 +14,26 @@
|
|
|
14
14
|
0 1073
|
|
15
15
|
1 197
|
|
16
16
|
|
|
17
|
-
####SGD lr =0.005
|
|
17
|
+
####SGD lr =0.005 エポック数 500
|
|
18
18
|
|
|
19
19
|
|
|
20
|
+
####SGD lr =0.005 エポック数 2000
|
|
21
|
+
|
|
22
|
+
|
|
23
|
+
|
|
20
|
-
####SGD lr =0.001
|
|
24
|
+
####SGD lr =0.001 エポック数 500
|
|
21
25
|
|
|
22
26
|
|
|
27
|
+
####SGD lr =0.001 エポック数 2000
|
|
28
|
+
|
|
29
|
+
|
|
23
|
-
####Adam デフォルト
|
|
30
|
+
####Adam デフォルト エポック数 500
|
|
24
31
|
|
|
25
32
|
|
|
33
|
+
####Adam デフォルト エポック数 2000
|
|
34
|
+
|
|
35
|
+
|
|
36
|
+
|
|
26
37
|
### 該当のソースコード
|
|
27
38
|
|
|
28
39
|
```python
|
3
Adamをデフォルト値に変更
title
CHANGED
|
File without changes
|
body
CHANGED
|
@@ -20,10 +20,9 @@
|
|
|
20
20
|
####SGD lr =0.001
|
|
21
21
|
|
|
22
22
|
|
|
23
|
-
####Adam
|
|
23
|
+
####Adam デフォルト
|
|
24
|
-
|
|
25
25
|
|
|
26
|
-
|
|
27
26
|
### 該当のソースコード
|
|
28
27
|
|
|
29
28
|
```python
|
2
Adamの結果と、SGDの結果(デフォルト)を記載
title
CHANGED
|
File without changes
|
body
CHANGED
|
@@ -14,8 +14,16 @@
|
|
|
14
14
|
0 1073
|
|
15
15
|
1 197
|
|
16
16
|
|
|
17
|
+
####SGD lr =0.005
|
|
18
|
+
|
|
17
19
|
|
|
20
|
+
####SGD lr =0.001
|
|
18
|
-
|
|
22
|
+
|
|
23
|
+
####Adam lr =0.001
|
|
24
|
+
|
|
25
|
+
|
|
26
|
+
|
|
19
27
|
### 該当のソースコード
|
|
20
28
|
|
|
21
29
|
```python
|
1
SGDではなく、Adamになっていたため、SGDで修正
title
CHANGED
|
File without changes
|
body
CHANGED
|
@@ -14,8 +14,8 @@
|
|
|
14
14
|
0 1073
|
|
15
15
|
1 197
|
|
16
16
|
|
|
17
|
-
|
|
18
17
|
|
|
18
|
+
|
|
19
19
|
### 該当のソースコード
|
|
20
20
|
|
|
21
21
|
```python
|
|
@@ -46,7 +46,7 @@
|
|
|
46
46
|
def compute_loss(t,y):
|
|
47
47
|
return criterion(y,t)
|
|
48
48
|
|
|
49
|
-
optimizers = optimizers.
|
|
49
|
+
optimizers = optimizers.SGD(model.parameters(),lr=0.005)
|
|
50
50
|
```
|
|
51
51
|
|
|
52
52
|
```python
|