質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

ただいまの
回答率

91.03%

  • Python

    5523questions

    Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

  • 機械学習

    481questions

    機械学習は、データからパターンを自動的に発見し、そこから知能的な判断を下すためのコンピューターアルゴリズムを指します。人工知能における課題のひとつです。

DeepLearning Network in Network CNN 保存したモデルを使って予測をすると毎回違った値が返ってくる

解決済

回答 3

投稿

  • 評価
  • クリップ 0
  • VIEW 305

_Victorique__

score 883

現在、ディープラーニングを用いた画像分類をやっています。
GPUを用いて学習を行いcpuにモデルを戻してからserializerのnpzを使ってモデルを保存しました。
ちなみにモデルにはNINを用いています。

早速保存したモデルを読み込んで分類とその分類したクラスのパーセンテージを表示させるようにしました。
ですが、同じ画像なのに毎回違った値が返ってきます。
例えばクラスの分類があっていて、そのクラスのパーセンテージが違う場合はまあいいのですが、クラス分類まで変わってしまうことがあります。モデルは変わっていないはずなのにこういうことがあり得るのでしょうか?

関係がありそうな部分だけコードを載せておきます。

Network in Network

#モデルの作成
model = NIN(5)
optimizer = optimizers.Adam()
optimizer.setup(model)
cuda.get_device(gpu_device).use()
model.to_gpu(gpu_device)


#モデルの保存
model.to_cpu()
serializers.save_npz('ファイル名.npz', model)


#確率変換
def softmax(a):
    c = np.max(a)
    exp_a = np.exp(a-c)
    sum_exp_a = np.sum(exp_a)
    y = exp_a / sum_exp_a
    return y


#予測
model = NIN(n_class)
serializers.load_npz('モデルのファイルパス', model)
x = Variable(img_lst[0:1])
y = model(x)
test = y.data[0]
test = test.tolist()
y = softmax(y.data[0])
  • 気になる質問をクリップする

    クリップした質問は、後からいつでもマイページで確認できます。

    またクリップした質問に回答があった際、通知やメールを受け取ることができます。

    クリップを取り消します

  • 良い質問の評価を上げる

    以下のような質問は評価を上げましょう

    • 質問内容が明確
    • 自分も答えを知りたい
    • 質問者以外のユーザにも役立つ

    評価が高い質問は、TOPページの「注目」タブのフィードに表示されやすくなります。

    質問の評価を上げたことを取り消します

  • 評価を下げられる数の上限に達しました

    評価を下げることができません

    • 1日5回まで評価を下げられます
    • 1日に1ユーザに対して2回まで評価を下げられます

    質問の評価を下げる

    teratailでは下記のような質問を「具体的に困っていることがない質問」、「サイトポリシーに違反する質問」と定義し、推奨していません。

    • プログラミングに関係のない質問
    • やってほしいことだけを記載した丸投げの質問
    • 問題・課題が含まれていない質問
    • 意図的に内容が抹消された質問
    • 広告と受け取られるような投稿

    評価が下がると、TOPページの「アクティブ」「注目」タブのフィードに表示されにくくなります。

    質問の評価を下げたことを取り消します

    この機能は開放されていません

    評価を下げる条件を満たしてません

    評価を下げる理由を選択してください

    詳細な説明はこちら

    上記に当てはまらず、質問内容が明確になっていない質問には「情報の追加・修正依頼」機能からコメントをしてください。

    質問の評価を下げる機能の利用条件

    この機能を利用するためには、以下の事項を行う必要があります。

質問への追記・修正、ベストアンサー選択の依頼

  • rkhs

    2017/11/16 06:36

    「ですが、同じ画像なのに毎回違った値が返ってきます。」具体的な数値を教えてください。

    キャンセル

  • _Victorique__

    2017/11/16 10:30

    クラス分類が変わる程値がブレると記述していますが、具体的な値を出して意味があるでしょうか?

    キャンセル

回答 3

checkベストアンサー

+3

Network in Network(http://hiro2o2.hatenablog.jp/entry/2016/12/06/214839)

このリンク先のコードそのまま使ってるんですかね?
そうだとして、、、ですけど、self.trainTrueのままだったりしませんか?
それなら、推論時にもdropoutが入るのでおかしくなりそうな気がします。

投稿

  • 回答の評価を上げる

    以下のような回答は評価を上げましょう

    • 正しい回答
    • わかりやすい回答
    • ためになる回答

    評価が高い回答ほどページの上位に表示されます。

  • 回答の評価を下げる

    下記のような回答は推奨されていません。

    • 間違っている回答
    • 質問の回答になっていない投稿
    • スパムや攻撃的な表現を用いた投稿

    評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。

  • 2017/11/16 13:11

    あーそこは完全に盲点でした。どうやらv2.0.0以降からtrainが廃止されていたらしく、エラーが出ていたのでそこだけ削除してしまっていたようです。解決策として以下のようなwith構文を書くことで切り替えができるようになるみたいです!ありがとうございました。
    with chainer.using_config('train', False):
    h = self.mlpconv4(F.dropout(h))

    キャンセル

+1

具体的にどういう処理をしているのかはよく知りませんが、乱択アルゴリズムを内部で使用しているような計算をしている以上、毎回異なる学習結果になるのは当たり前ではないでしょうか?モデルの妥当性などはもちろん学習結果が毎回異なることとは別問題ですが。
追記:「モデルの保存」が「学習したパラメータの保存」ということならば予測させた結果は毎回変わることはないと思います。

投稿

編集

  • 回答の評価を上げる

    以下のような回答は評価を上げましょう

    • 正しい回答
    • わかりやすい回答
    • ためになる回答

    評価が高い回答ほどページの上位に表示されます。

  • 回答の評価を下げる

    下記のような回答は推奨されていません。

    • 間違っている回答
    • 質問の回答になっていない投稿
    • スパムや攻撃的な表現を用いた投稿

    評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。

  • 2017/11/16 10:39

    学習したパラメータの保存が serializer.save という認識であっているのかというところが疑問ですね。現在は optimizer.save をしていないのでそれを含めてのモデルの保存というのなら少し考えないといけないですね。それにしてもクラス分類が変わってしまうほどの値のブレは正直理解不能です。

    キャンセル

  • 2017/11/16 13:13

    解決しました!ありがとうございました!

    キャンセル

+1

当然ですがNINのコードがないと答えられないでしょう。
URLの先にあるそのNINのコードには__call__の途中にdropoutが入っています。
これがそのままなら、毎回ランダムに入力の一部を削除するので結果が変わりますね。どうなんでしょう?

投稿

  • 回答の評価を上げる

    以下のような回答は評価を上げましょう

    • 正しい回答
    • わかりやすい回答
    • ためになる回答

    評価が高い回答ほどページの上位に表示されます。

  • 回答の評価を下げる

    下記のような回答は推奨されていません。

    • 間違っている回答
    • 質問の回答になっていない投稿
    • スパムや攻撃的な表現を用いた投稿

    評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。

  • 2017/11/16 10:34

    回答ありがとうございます。dropout関数に関してもう少し調べてみます。

    キャンセル

  • 2017/11/16 10:39

    ですがクラス分類が変わる程の値のブレは正直理解しがたいです。

    キャンセル

  • 2017/11/16 11:48

    モデルの重みとコードがないことには、そこへの確証は持てません。あり得るのでしょうか? と聞かれたらあり得るでしょう、としか。

    キャンセル

  • 2017/11/16 13:13

    どうやらdropout関数が原因でした。結果的には同じ値が返ってくるのが普通という認識であっていました。ありがとうございました!

    キャンセル

  • 2017/11/16 13:47

    なんだ。普通そんな挙動をするコードを書くことがあるのか? という質問だったのか……。

    キャンセル

  • 2017/11/16 13:50

    Chainerの古いコードの挙動まで調べなかったのは私の失敗で、ちょっと勘違いしたままの回答になってしまいました。

    キャンセル

15分調べてもわからないことは、teratailで質問しよう!

  • ただいまの回答率 91.03%
  • 質問をまとめることで、思考を整理して素早く解決
  • テンプレート機能で、簡単に質問をまとめられる

関連した質問

同じタグがついた質問を見る

  • Python

    5523questions

    Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

  • 機械学習

    481questions

    機械学習は、データからパターンを自動的に発見し、そこから知能的な判断を下すためのコンピューターアルゴリズムを指します。人工知能における課題のひとつです。