質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

ただいまの
回答率

90.50%

  • Python

    8002questions

    Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

kerasを使用してtensorboard上にembedding visualizationのエラーについて

解決済

回答 1

投稿 編集

  • 評価
  • クリップ 0
  • VIEW 279

yohehe

score 19

kerasを使用してenbedding visualizationをtensorboard上で使用することは可能でしょうか?
他のサイトを色々としらべてみて、それらしい記載がありましたのでtensorboardのcallback関数にenbedding_layer_namesをパラメーターとして挿入したのですが、以下のエラーが出てすすみません。

embeddings_layer_names = None # or some list of layers ['embeddings_1']

tb_cb=keras.callbacks.TensorBoard(log_dir="/Users/name/dataname40/tflog/",histogram_freq=10,write_graph=False,embeddings_freq=100,embeddings_layer_names=embeddings_layer_names)

model=Sequential()
model.add(Dense(units=20,activation="relu",input_shape=(n_features,)))
model.add(Dropout(0.5))
model.add(Dense(units=10,activation="relu"))
model.add(Dropout(0.5))
model.add(Dense(units=n_classes,activation="softmax"))
model.compile(loss="categorical_crossentropy",optimizer="adam",metrics=["accuracy"])
history=model.fit(X,y_keras,epochs=4000,validation_split=0.1,batch_size=20,verbose=2,callbacks=[tb_cb])


コード


error
/anaconda3/lib/python3.6/site-packages/tensorflow/python/training/saver.py in _build(self, checkpoint_path, build_save, build_restore)
1370           return
1371         else:
-> 1372           raise ValueError("No variables to save")
1373       self._is_empty = False
1374 

ValueError: No variables to save

何度か試してみてはいるのですが、model.fitの時点でエラーが出てしまいます。
間違いなどがあれば教えていただけますと幸いです。よろしくお願いいたします。

stackoverflowで教えていただいた手法の追記

import keras
from keras.datasets import mnist
from keras.models import Sequential
from keras.layers import Dense, Dropout
from keras import callbacks

logdir="/Users/name/Dropbox/python/"

batch_size = 100
num_classes = 10
epochs = 20


# the data, shuffled and split between train and test sets
(x_train, y_train), (x_test, y_test) = mnist.load_data()

x_train = x_train.reshape(60000, 784)
x_test = x_test.reshape(10000, 784)
x_train = x_train.astype('float32')
x_test = x_test.astype('float32')
x_train /= 255
x_test /= 255
print(x_train.shape[0], 'train samples')
print(x_test.shape[0], 'test samples')

# convert class vectors to binary class matrices
y_train = keras.utils.to_categorical(y_train, num_classes)
y_test = keras.utils.to_categorical(y_test, num_classes)

model = Sequential()
model.add(Dense(200, activation='relu', input_shape=(784,)))
model.add(Dropout(0.2))
model.add(Dense(100, activation='relu'))
model.add(Dropout(0.2))
model.add(Dense(60, activation='relu'))
model.add(Dropout(0.2))
model.add(Dense(30, activation='relu'))
model.add(Dropout(0.2))
model.add(Dense(10, activation='softmax'))
embedding_layer_names = set(layer.name
                            for layer in model.layers
                            if layer.name.startswith('dense_'))
tb = callbacks.TensorBoard(log_dir=log_dir, histogram_freq=10, batch_size=32,write_graph=True, write_grads=True, write_images=True,embeddings_freq=10, embeddings_metadata=None,
embeddings_layer_names=embedding_layer_names)

model.compile(loss='categorical_crossentropy',
              optimizer='adam',
              metrics=['accuracy'])
history = model.fit(x_train, y_train,
                    callbacks=[tb,early_stop],
                    batch_size=batch_size,
                    epochs=epochs,
                    verbose=1,
                    validation_data=(x_test, y_test))
score = model.evaluate(x_test, y_test, verbose=0)
print('Test loss:', score[0])
print('Test accuracy:', score[1])
コード


上記サイトに記載されているコードを試したのですが、 
To visualize embeddings, embeddings_data must be provided.

model.fitは進行するのですが、上記のエラーが最後に出力されます。
embeddings_data=None,[]などで定義したとしても上記のエラーがでてしまいます。すみませんが、embeddings_dataを与えておくということはどういうことなのでしょうか。

  • 気になる質問をクリップする

    クリップした質問は、後からいつでもマイページで確認できます。

    またクリップした質問に回答があった際、通知やメールを受け取ることができます。

    クリップを取り消します

  • 良い質問の評価を上げる

    以下のような質問は評価を上げましょう

    • 質問内容が明確
    • 自分も答えを知りたい
    • 質問者以外のユーザにも役立つ

    評価が高い質問は、TOPページの「注目」タブのフィードに表示されやすくなります。

    質問の評価を上げたことを取り消します

  • 評価を下げられる数の上限に達しました

    評価を下げることができません

    • 1日5回まで評価を下げられます
    • 1日に1ユーザに対して2回まで評価を下げられます

    質問の評価を下げる

    teratailでは下記のような質問を「具体的に困っていることがない質問」、「サイトポリシーに違反する質問」と定義し、推奨していません。

    • プログラミングに関係のない質問
    • やってほしいことだけを記載した丸投げの質問
    • 問題・課題が含まれていない質問
    • 意図的に内容が抹消された質問
    • 広告と受け取られるような投稿

    評価が下がると、TOPページの「アクティブ」「注目」タブのフィードに表示されにくくなります。

    質問の評価を下げたことを取り消します

    この機能は開放されていません

    評価を下げる条件を満たしてません

    評価を下げる理由を選択してください

    詳細な説明はこちら

    上記に当てはまらず、質問内容が明確になっていない質問には「情報の追加・修正依頼」機能からコメントをしてください。

    質問の評価を下げる機能の利用条件

    この機能を利用するためには、以下の事項を行う必要があります。

回答 1

checkベストアンサー

+1

https://stackoverflow.com/questions/45265436/keras-save-image-embedding-of-the-mnist-data-set

投稿

  • 回答の評価を上げる

    以下のような回答は評価を上げましょう

    • 正しい回答
    • わかりやすい回答
    • ためになる回答

    評価が高い回答ほどページの上位に表示されます。

  • 回答の評価を下げる

    下記のような回答は推奨されていません。

    • 間違っている回答
    • 質問の回答になっていない投稿
    • スパムや攻撃的な表現を用いた投稿

    評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。

  • 2018/06/26 00:32

    mkgrei様ありがとうございます。
    tb_cb=TensorResponseBoard(log_dir="/Users//Dropbox/python/datatest/tflog/", histogram_freq=10, batch_size=10,write_graph=True, write_grads=True, write_images=True,
    embeddings_freq=10,
    embeddings_layer_names=['dense_1'],
    embeddings_metadata='metadata.tsv',
    val_size=len(X), img_path='images.jpg', img_size=[28, 28])
    を導入してもmodel.fitの段階で同様のValue Errorが出てしました。kerasとtensorflowのバージョンとアップデートなどの確認とstackoverflowのサイトの記事をもう少し読んで、解決次第プログラムをを追記いたします。

    キャンセル

  • 2018/06/28 21:00

    何度か試したのですがうまくいきませんでした。何が足りないのかもわからずで、力足らずでした。
    教えていただきましたサイトでは可能なようなので、勉強しなおします。ありがとうございました。

    キャンセル

15分調べてもわからないことは、teratailで質問しよう!

  • ただいまの回答率 90.50%
  • 質問をまとめることで、思考を整理して素早く解決
  • テンプレート機能で、簡単に質問をまとめられる

関連した質問

  • 受付中

    Kerasを用いたCNN3によるcifar10の画像認識

    Keras初心者です。 CNNを理解するためにKerasでモデルを作り、cifar10のデータを元にモデルの認識精度を出力しようとしています。 以下のプログラムに対するエラーの

  • 解決済

    Kerasで訓練データにIDがある場合のベストプラクティスについて

    前提・実現したいこと 一般的なcsvデータをKerasに食わせて他クラス分類を行おうと思っているのですが、 訓練データに含まれるID系のデータの扱いについて困っております。 ID系

  • 解決済

    CNNの比較、改善点

     知りたいこと cyfer10に使用したCNNでなぜこのような差が出たのか、してはいけないことが含まれていたのか。 aidemyに使われていたCNNと層よりも、より層を増やして適当

  • 解決済

    Kerasでファインチューニング

     前提・実現したいこと 画像分類モデルを作成しています。 その際、Kerasでファインチューニングに挑戦しています。 InceptionやInceptionResNetV2のファイ

  • 解決済

    KerasでSegnetを行いたい

    https://teratail.com/questions/131885#reply-200116 以前質問させていただいた部分は解決したのですが別の部分でエラーがでてしまいまし

  • 解決済

    学習の様子を可視化できない

    学習の様子を可視化できないです。 ・ ・ ・ # placeholders input_sequence = Input((story_maxlen,)) question =

  • 受付中

    Kerasのバッチ処理毎に入力データと出力データを取得したい

    Keras(バックエンドはTensorFlow)を利用して、各バッチ処理毎に入力データと予測結果を取得したいです。 ドキュメントを読んだところ、精度等はコールバック関数を利用し

  • 解決済

    kerasのCNNで複数の入力から一つの判定を得る方法

     前提・実現したいこと 大きいサイズの同一画像から複数かつ同程度の矩形範囲をクロップしてきて CNNにクロップ数分だけ入力し複数の判定から多数決をとりクロップ元の画像の種類を推定し

同じタグがついた質問を見る

  • Python

    8002questions

    Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。