numpyファイルが読み込めない

Question

前提・実現したいこと

pythonで"ディープラーニングを使用して「あなたにそっくりな女優判別プログラム」を作ったおはなし"
リンク：https://qiita.com/k_eita/items/a50a4cae0aa2598422e4
というものを参考にしてシステムを作成しています。
numpyファイルを読み込もうとしていたら以下のエラーメッセージが発生しました。

発生している問題・エラーメッセージ

Traceback (most recent call last):
  File "c:/Users/Owner/Documents/anaconda_vs/appale_project/use_snn.py", line 93, in <module>
    main()
  File "c:/Users/Owner/Documents/anaconda_vs/appale_project/use_snn.py", line 26, in main
    X_train, X_val, Y_train, Y_val = np.load("./" + in_npy)
  File "C:\Users\Owner\anaconda3\envs\cnn_env\lib\site-packages\numpy\lib\npyio.py", line 417, in load
    fid = stack.enter_context(open(os_fspath(file), "rb"))
FileNotFoundError: [Errno 2] No such file or directory: './appale_rgb.npy'

該当のソースコード

from inspect import CORO_SUSPENDED
import numpy as np
import matplotlib.pyplot as plt
import keras
from keras.models import Sequential
from keras.layers import Conv2D, MaxPooling2D
from keras.layers import Activation, Dropout, Flatten, Dense
from keras.utils import np_utils
from keras.utils import plot_model

#numpyファイルの読み込み
in_npy = "appale_rgb.npy"
#出力するモデル名を指定
out_model = "appale_out.h5"

#CNN設定
CATEGORY_NUM = 5
BATCH_SIZE = 32
EPOCHS = 15
LEARNING_RATE = 0.0001

def main():
    #画像データの読み込む
    X_train, X_val, Y_train, Y_val = np.load("./" + in_npy)
    #正規化を行う（最大値：256で割って0~1に収束）
    X_train = X_train.astype("float")/ 256
    X_val = X_val.astype("float") / 256
    #ラベルをベクトルに変換
    Y_train = np_utils.to_categorical(Y_train, CATEGORY_NUM)
    Y_val = np_utils.to_categorical(Y_val, CATEGORY_NUM)

    #学習の実行
    model = model_train(X_train, Y_train, X_val, Y_val)

試したこと

・絶対パスを入力する
・新たなファイルを作ってそこで実行してみる
・再起動

補足情報（FW/ツールのバージョンなど）

・Python3.7.10 64bit
・仮想環境　anaconda3
・keras 2.4.3
・tensorflow 2.3.0
・matplotlib 3.3.4

Comments

[meg_]

「試したこと」のそのどれもで同じエラー（FileNotFoundError）が出たのでしょうか？

[keita_kkk]

絶対パスを入力すると
OSError: [Errno 22] Invalid argument: './C:/Users/Owner/Documents/anaconda_vs/tryappale_rgb.npy'
となります。

[jbpb0]

コードの先頭に下記を追加して実行してみてください

import os
print(os.listdir("./"))

そうすると、カレントディレクトリに置いてあるファイルのファイル名が表示されますが、その中にnp.load()で読み込ませたいファイル「appale_rgb.npy」はありますでしょうか？

上記結果で、読み込ませたいファイルのファイル名が表示されない場合は、下記のどちらかを行う必要があります
・カレントディレクトリを調べて、そこにファイルを置く
・カレントディレクトリを、現状ファイルが置いてあるディレクトリパスに変える

参考
https://note.nkmk.me/python-os-getcwd-chdir/

[keita_kkk]

ありません。
['appale_project', 'C-language', 'python']と出てきましたが全てフォルダの名前です。

[meg_]

> 絶対パスを入力するとOSError: [Errno 22] Invalid argument:'./C:/Users/Owner/Documents/anaconda_vs/tryappale_rgb.npy'となります。

絶対パスならパスは「C:/Users/Owner/Documents/anaconda_vs/tryappale_rgb.npy」かと思います。

[jbpb0]

> ありません。
['appale_project', 'C-language', 'python']と出てきましたが全てフォルダの名前です。

それでしたら、私の一つ前のコメントの後半を行う必要があります

[keita_kkk]

ありがとうございます。
やってみたところ['appale_project', 'appale_rgb.npy', 'C-language', 'python']となり、表示されました。
しかし、FileNotFoundError: [Errno 2] No such file or directory: 'C:\\Users\\Owner\\Documents\\anaconda_vs\\apple_project\\appale_rgb.npy'
のエラーは変わりません。

[meg_]

> 'C:\\Users\\Owner\\Documents\\anaconda_vs\\apple_project\\appale_rgb.npy'のエラーは変わりません。
上記ファイルは確かに存在していますか？

[jbpb0]

質問者さん

私が書いてる方法は、絶対パスを使う方法ではなく、質問に書かれてるコードの
in_npy = "appale_rgb.npy"
と
X_train, X_val, Y_train, Y_val = np.load("./" + in_npy)
をそのまま変えずに実行する方法です
そこを混同されませんように

> ['appale_project', 'appale_rgb.npy', 'C-language', 'python']となり、表示されました。

となれば、質問のコードのままで読み込めるはず

[keita_kkk]

なるほど！勘違いしていました。
やってみたところ、
ValueError: Input 0 of layer conv2d is incompatible with the layer: : expected min_ndim=4, found ndim=1. Full shape received: [None]
となりましたが、これはおそらく別のエラーであると思われます。
今回の質問であるnumpyファイルの読み込みについては無事解決しました!!
皆様、ありがとうございました。

Answer 1

自己解決ではありませんが、質問に対するコメントより解決方法を記入します。

以下jbpb0様のコメントより

2021/07/24 17:53 編集

コードの先頭に下記を追加して実行してみてください

import os
print(os.listdir("./"))

そうすると、カレントディレクトリに置いてあるファイルのファイル名が表示されますが、その中にnp.load()で読み込ませたいファイル「appale_rgb.npy」はありますでしょうか？

上記結果で、読み込ませたいファイルのファイル名が表示されない場合は、下記のどちらかを行う必要があります
・カレントディレクトリを調べて、そこにファイルを置く
・カレントディレクトリを、現状ファイルが置いてあるディレクトリパスに変える

参考
https://note.nkmk.me/python-os-getcwd-chdir/

質問者さん

私が書いてる方法は、絶対パスを使う方法ではなく、質問に書かれてるコードの
in_npy = "appale_rgb.npy"
と
X_train, X_val, Y_train, Y_val = np.load("./" + in_npy)
をそのまま変えずに実行する方法です
そこを混同されませんように

['appale_project', 'appale_rgb.npy', 'C-language', 'python']となり、表示されました。

となれば、質問のコードのままで読み込めるはず

Answer 2

"./"を消してみたらうまくいきませんか？

X_train, X_val, Y_train, Y_val = np.load(in_npy)

質問文のanaconda環境を読み落としてました。
"./"だと仮想環境の作業ディレクトリを起点としてしまうのではないでしょうか？

Comments

[keita_kkk]

回答ありがとうごさいます。
試したところ、上手くいきませんでした。
try-exceptで試したところ、#numpyファイルの読み込み 部分ではなく
#画像データの読み込み　部分でエラーになっている様です。

Answer 3

開示頂いたコードを試してみました。
ファイルの階層情報が示されておりませんでしたが
該当のソースコードとappale_rgb.npyが同一フォルダに存在して
ファイル名などの記述ミスがなければNo such file or directoryは出ませんでした。

Comments

[keita_kkk]

そうなのですか...
私ももう一度試してみたのですが駄目でした。
原因として考えられることはありますでしょうか？

[nonoshu]

最初は私もappale_rgb.npy のファイル名を記述ミスしており
apple_rgb.npy にして同じエラーがでてしまいました。
「天晴（あっぱれ）RGB　」とはどういう意味なのでしょう？
記述ミスしにくいファイル名や変数名を使うこともプログラミングをサクサクすすめるコツですね・・・

[keita_kkk]

ありがとうごさいます!
確かに名前の決め方も大切ですね・・・
appaleというのは、リンゴを認識するシステムを作っていることから来ています。
追記：記述ミスでもないようです。

[nonoshu]

名前の由来ありがとうございます。腑に落ちました。