質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.48%
NumPy

NumPyはPythonのプログラミング言語の科学的と数学的なコンピューティングに関する拡張モジュールです。

Python 3.x

Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。

Q&A

2回答

1452閲覧

listを使わずに直でndarrayを構成する方法

ShikaTech

総合スコア468

NumPy

NumPyはPythonのプログラミング言語の科学的と数学的なコンピューティングに関する拡張モジュールです。

Python 3.x

Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。

0グッド

0クリップ

投稿2018/03/24 06:10

編集2018/03/24 06:11

Python+Keras+Tensorflowで機械学習を行っています。
例によって画像の分類問題なのですが、教師として食わせる画像のサイズと枚数次第でMemoryErrorが発生してしまっています。
そこでこの記事リストは積極的にnumpy配列にするを参考にコードを改修したいと考えたのですが、どうにもうまくいきません。
有識者の方、アドバイスをいただけないでしょうか。

Python

1# ↓こんな感じで直接扱いたい 2np_list = np.array([]) 3# ↓もともと使っていた配列 4image_list = [] 5label_list = [] 6 7for dir in os.listdir("c:\work\train"): 8 9 dir1 = "c:\work\train\" + dir 10 label = 0 11 12 if dir == "1": 13 label = 1 14 15 for file in os.listdir(dir1): 16 label_list.append(label) 17 filepath = dir1 + "/" + file 18 image = np.array(Image.open(filepath).resize((300, 300))) 19 image = image.transpose(2, 0, 1) 20 image_list.append(image / 255.) 21 np_list = np.append(np_list,image / 255.) 22 23# kerasに渡すためにnumpy配列に変換。 24image_list = np.array(image_list) 25# 画像サイズが大きい&枚数が多いとこの↑部分でMemoryErrorにて落ちる

np_listをimage_listと同じ形にさせたいが成就せず…

image_list array([[[[1., 1., 1., ..., 1., 1., 1.],\n [1., 1., 1., ..., 1., 1., 1.],\n np_list array([1., 1., 1., ..., 1., 1., 1.])

あるいはことの本質はMemoryErrorの回避ですので、何かしら別解のアドバイスでもあればご指摘いただけると嬉しいです!

(manabiya二日目には参加できずに会社でお仕事ですよ…)

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

guest

回答2

0

メモリ不足回避?ということでGeneratorを使えば解決できるかなと。
具体的にはKerasのImageGenerator.flow_from_directory(directory)で読み出せばいいかなと思いました。ディレクトリごとにラベルが分かれているのであればclass_modecategoricalにすればディレクトリごとにラベルを自動でつけてくれるようです。

python

1from keras.preprocessing.image import ImageDataGenerator 2 3img_gen = ImageDataGenerator(rescale=1.0 / 255) 4train_generator = img_gen.flow_from_directory( 5 "./work/train/", 6 target_size=(300, 300), 7 class_mode='categorical') 8 9# modelは既に定義済みとする 10model.fit_generator(train_generator)

参考:

投稿2018/03/24 07:22

wakame

総合スコア1170

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

0

失礼。
トンチンカンな回答を書いてしまいました。

投稿2018/03/24 10:44

編集2018/03/24 10:52
tachikoma

総合スコア3601

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

まだベストアンサーが選ばれていません

会員登録して回答してみよう

アカウントをお持ちの方は

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.48%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問