質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.48%
Chainer

Chainerは、国産の深層学習フレームワークです。あらゆるニューラルネットワークをPythonで柔軟に書くことができ、学習させることが可能。GPUをサポートしており、複数のGPUを用いた学習も直感的に記述できます。

Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

Q&A

解決済

1回答

2379閲覧

chainerでのStopiterationを回避するには?

KazuyaKojima

総合スコア16

Chainer

Chainerは、国産の深層学習フレームワークです。あらゆるニューラルネットワークをPythonで柔軟に書くことができ、学習させることが可能。GPUをサポートしており、複数のGPUを用いた学習も直感的に記述できます。

Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

0グッド

0クリップ

投稿2019/11/26 06:36

現在CNNを用いた株価騰落の分類を行うモデルを作成しています。
以前まできちんと動作していたのですがある時から急に
StopIterationのエラーが出て2回目以降の学習を繰り返してくれなくなりました。
調べてみても原因が全く分からず困っております。

以下エラー全文です
epoch main/loss main/accuracy validation/main/loss validation/main/accuracy elapsed_time
1 20.1328 0.509596 0.692708 0.526667 605.443
Exception in main training loop:
Traceback (most recent call last):
File "/Users/kojimakazuya/anaconda3/lib/python3.7/site-packages/chainer/training/trainer.py", line 316, in run
update()
File "/Users/kojimakazuya/anaconda3/lib/python3.7/site-packages/chainer/training/updaters/standard_updater.py", line 175, in update
self.update_core()
File "/Users/kojimakazuya/anaconda3/lib/python3.7/site-packages/chainer/training/updaters/standard_updater.py", line 180, in update_core
batch = iterator.next()
File "/Users/kojimakazuya/anaconda3/lib/python3.7/site-packages/chainer/iterators/serial_iterator.py", line 75, in next
raise StopIteration
Will finalize trainer extensions and updater before reraising the exception.
Traceback (most recent call last):
File "cnn.py", line 67, in <module>
trainer.run()
File "/Users/kojimakazuya/anaconda3/lib/python3.7/site-packages/chainer/training/trainer.py", line 349, in run
six.reraise(*exc_info)
File "/Users/kojimakazuya/anaconda3/lib/python3.7/site-packages/six.py", line 693, in reraise
raise value
File "/Users/kojimakazuya/anaconda3/lib/python3.7/site-packages/chainer/training/trainer.py", line 316, in run
update()
File "/Users/kojimakazuya/anaconda3/lib/python3.7/site-packages/chainer/training/updaters/standard_updater.py", line 175, in update
self.update_core()
File "/Users/kojimakazuya/anaconda3/lib/python3.7/site-packages/chainer/training/updaters/standard_updater.py", line 180, in update_core
batch = iterator.next()
File "/Users/kojimakazuya/anaconda3/lib/python3.7/site-packages/chainer/iterators/serial_iterator.py", line 75, in next
raise StopIteration
StopIteration

python

1 2import matplotlib.pyplot as plt 3import load_data 4import stock_data 5import img_to_vector 6import load_vector 7import numpy as np 8from sklearn.preprocessing import MinMaxScaler 9import chainer 10import chainer.links as L 11import chainer.functions as F 12from chainer import Chain, Variable, datasets, optimizers 13from chainer import report, training 14from chainer.training import extensions 15from chainer import iterators 16from chainer import serializers 17import chainer.cuda 18 19#データの準備 20sp500, topix500, usd_jpy = load_vector.load_vector() 21x_train, x_test = topix500[:2000], topix500[2000:] 22 23t_train, t_test = load_data.label(stock_data.teacher_dataset()[:2000]), load_data.label(stock_data.teacher_dataset()[2000:]) 24 25train = list(zip(x_train, t_train)) 26test = list(zip(x_test, t_test)) 27 28class CNN(Chain): 29 def __init__(self): 30 super(CNN, self).__init__() 31 with self.init_scope(): 32 self.cn1 = L.Convolution2D(None, 32, ksize=3, pad=1) 33 self.cn2 = L.Convolution2D(None, 32, ksize=3, pad=1) 34 self.fc1 = L.Linear(None, 100) 35 self.fc2 = L.Linear(100, 2) 36 37 def __call__(self, x, t=None): 38 h1 = F.max_pooling_2d(F.relu(self.cn1(x)), ksize=2, stride=2) 39 h2 = F.max_pooling_2d(F.relu(self.cn2(h1)), ksize=2, stride=2) 40 h3 = F.dropout(F.relu(self.fc1(h2))) 41 return self.fc2(h3) 42 43 44model = CNN() 45net = L.Classifier(model) 46optimizer = optimizers.Adam().setup(net) 47 48batchsize = 20 49train_iter = chainer.iterators.SerialIterator(train, batchsize, repeat=False, shuffle=True) 50test_iter = chainer.iterators.SerialIterator(test, batchsize, repeat=False, shuffle=True) 51 52updater = training.StandardUpdater(train_iter, optimizer, device=-1) # device=-1でCPUでの計算実行を指定 53 54epoch = 100 55trainer = training.Trainer(updater, (epoch, 'epoch'), out='result') 56 57# テストデータで評価 58trainer.extend(extensions.Evaluator(test_iter, net, device = -1)) 59 60# 学習を記録 61trainer.extend(extensions.LogReport(trigger=(1, 'epoch'))) 62 63# グラフに描画、保存 64trainer.extend(extensions.PlotReport(['main/loss', 'validation/main/loss'], x_key='epoch', file_name='cnn2_loss.png')) 65trainer.extend(extensions.PlotReport(['main/accuracy', 'validation/main/accuracy'], x_key='epoch', file_name='cnn2_accuracy.png')) 66trainer.extend(extensions.PrintReport(['epoch', 'main/loss', 'main/accuracy','validation/main/loss', 'validation/main/accuracy','elapsed_time']), trigger=(1, 'epoch')) 67 68trainer.run()

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

guest

回答1

0

自己解決

iterの箇所のrepeat引数をTrueに変えると治りました。
そういえばshuffleをtrueに変えた時にrepeatの意味を理解せずにtest同様にfalseにしてしまっていた。
repeatは繰り返しをするかどうか、ですね。

投稿2019/11/26 08:26

KazuyaKojima

総合スコア16

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.48%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問