質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.48%
Keras

Kerasは、TheanoやTensorFlow/CNTK対応のラッパーライブラリです。DeepLearningの数学的部分を短いコードでネットワークとして表現することが可能。DeepLearningの最新手法を迅速に試すことができます。

Python 3.x

Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。

機械学習

機械学習は、データからパターンを自動的に発見し、そこから知能的な判断を下すためのコンピューターアルゴリズムを指します。人工知能における課題のひとつです。

Q&A

解決済

1回答

2488閲覧

kerasでNameErrorがでます

yep

総合スコア45

Keras

Kerasは、TheanoやTensorFlow/CNTK対応のラッパーライブラリです。DeepLearningの数学的部分を短いコードでネットワークとして表現することが可能。DeepLearningの最新手法を迅速に試すことができます。

Python 3.x

Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。

機械学習

機械学習は、データからパターンを自動的に発見し、そこから知能的な判断を下すためのコンピューターアルゴリズムを指します。人工知能における課題のひとつです。

0グッド

0クリップ

投稿2018/10/22 08:37

編集2018/10/22 09:01

文章を学習する単純なautoencoderを書いてみました。
しかし、
Traceback (most recent call last):
File "C:\Users\yudai\Desktop\keras_AE.py", line 70, in <module>
validation_data=(test_word))
NameError: name 'test_word' is not defined
と出力されます。
もし原因がわかる方やもっとこうしたらいいのに、というご意見がある方は、
何卒、ご教授宜しくお願い致します。

python

1from keras.layers import Input, Dense 2from keras.layers.core import Activation 3from keras.models import Model 4from keras.utils.data_utils import get_file 5import numpy as np 6import codecs 7 8#データの読み込み 9with codecs.open(r'C:\Users\yudai\Desktop\poem.txt', 'r', 'utf-8') as f: 10 for text in f: 11 text = text.strip() 12#コーパスの長さ 13print('corpus length:', len(text)) 14#文字数を数えるため、textをソート 15chars = sorted(list(set(text))) 16#全文字数の表示 17print('total chars:', len(chars)) 18#文字をID変換 19char_indices = dict((c, i) for i, c in enumerate(chars)) 20#IDから文字へ変換 21indices_char = dict((i, c) for i, c in enumerate(chars)) 22#テキストを17文字ずつ読み込む 23maxlen = 17 24#サンプルバッチ数 25step = 3 26sentences = [] 27next_chars = [] 28for i in range(0, len(text) - maxlen, step): 29 sentences.append(text[i: i + maxlen]) 30 next_chars.append(text[i + maxlen]) 31#学習する文字数を表示 32print('Sequences:', len) 33 34#ベクトル化する 35print('Vectorization...') 36x = np.zeros((len(sentences), maxlen, len(chars)), dtype=np.bool) 37y = np.zeros((len(sentences), len(chars)), dtype=np.bool) 38for i, sentence in enumerate(sentences): 39 for t, char in enumerate(sentence): 40 x[i, t, char_indices[char]] = 1 41 y[i, char_indices[next_chars[i]]] = 1 42 43#モデルを構築する工程に入る 44print('Build model...') 45#encoderの次元 46encoding_dim = 128 47#入力用の変数 48input_word = Input(shape=(32,)) 49#入力された語がencodeされたものを格納する 50encoded = Dense(128, activation='relu')(input_word) 51encoded = Dense(64, activation='relu')(encoded) 52encoded = Dense(32, activation='relu')(encoded) 53#潜在変数(実質的な主成分分析) 54latent = Dense(8, activation='relu')(encoded) 55#encodeされたデータを再構成 56decoded = Dense(32, activation='relu')(latent) 57decoded = Dense(64, activation='relu')(decoded) 58decoded = Dense(128, activation='relu')(encoded) 59 60output = Dense(100, activation='relu') 61 62autoencoder = Model(input=input_word, output=decoded) 63#Adamで最適化、loss関数をcategorical_crossentropy 64autoencoder.compile(optimizer='Adam', loss='categorical_crossentropy') 65 66#autoencoderの実行 67autoencoder.fit(x, 68 epochs=1000, 69 batch_size=256, 70 shuffle=False) 71#学習の進み具合を観察 72def on_epoch_end(epochs): 73 print() 74 print('Epoch: %d' % epochs) 75 76#モデルの構造を保存 77model_json = autoencoder.to_json() 78with open('keras_AE.json', 'w') as json_file: 79 json_file.write(model_json) 80#学習済みモデルの重みを保存 81autoencoder.save_weights('AE.h5') 82 83decoded_word = autoencoder.predict(word_test) 84 85X_embedded = model.predict(X_train) 86autoencoder.fit(X_embedded,X_embedded,epochs=10, 87 batch_size=256, validation_split=.1)

C:\Users\hoge\Desktop\poem.txtは、webから2万9000件の俳句を一文ずつ抽出し、MeCabで形態素解析を行っています。
例:かき くえば かね が なる なり ほうりゅうじ

#環境
Windows 10

python 3.7.0
tensorflow-gpu 1.9.0
keras 2.2.4

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

tiitoi

2018/10/22 08:40

test_word という変数がどこにも定義されていないため、エラーになっています。バリデーション用のデータを用意していないのであれば、とりあえず validation_data=(test_word) を消してみてはどうですか
yep

2018/10/22 08:41

わかりました。
yep

2018/10/22 08:52

単純に消去するとTypeError: Unrecognized keyword arguments: {'epoch': 1000}になります。
tiitoi

2018/10/22 08:55

fit() 関数の引数で epoch ではなく、 epochs です。関数の呼び出し等でエラーが出たら、まず公式ドキュメントで使い方が合っているか1つずつ確認してみましょう。https://keras.io/ja/
tiitoi

2018/10/22 09:21

すいません。状況がよくわからないのですが、また別のエラーが出たということですか?
yep

2018/10/22 09:23

はい、ValueError: Error when checking input: expected input_1 to have 2 dimensions, but got array with shape (2, 17, 12)と出ました。
tiitoi

2018/10/22 09:29

与えようとしているデータの形状と入力層の形状が一致していないため起こっています。input_word = Input(shape=(maxlen, len(chars))) としてはどうでしょうか?
yep

2018/10/22 09:47

ありがとうございます。また一つエラーが訂正できました。
yep

2018/10/22 10:21

実は、また別のエラーが起きましたが、別の質問をたてようと思います
guest

回答1

0

自己解決

Name errorに関しましては、
tiitoiさんからの
"test_word という変数がどこにも定義されていないため、エラーになっています。バリデーション用のデータを用意していないのであれば、とりあえず validation_data=(test_word) を消してみてはどうですか"

epochをepochsに
"与えようとしているデータの形状と入力層の形状が一致していないため起こっています。input_word = Input(shape=(maxlen, len(chars))) としてはどうでしょうか?"
で解決できました。
誠にありがとうございました。

投稿2018/10/23 07:04

yep

総合スコア45

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.48%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問