行列を分割して戻す方法

Question

前提・実現したいこと

以下シェイプのものを正規化しようと255で割るとMemorry Errorになるため、行列じたいを分割して少しずつ正規化を行い、足し算をしようと思っています。

print(sevasutyan.shape)
>(14914104, 100, 100)

イメージ…

(14914104, 100, 100) 
⇒se1 (7457052, 100, 100) と se2 (7457052, 100, 100)に分割（もしくはもっと分割）
⇒ se2 = se2 / 255 , se1 = se1 / 255      (正規化）
⇒ sevasutyan_kekka = se1 + se2

これはどのように行えばいいのか教えて頂けないでしょうか。

試したのは以下です。
もともと逆パターンで以下を行っていました。

import numpy as np			
			
img1 = np.ones((3, 4))			
img2 = np.ones((3, 4)) * 2			
img3 = np.ones((3, 4)) * 3			
			
img_list = [img1, img2, img3]  # (3, 4) が ３つ			
print(img_list[0].shape)  # -> (3, 4)			
			
img_list = [np.expand_dims(x, axis=0) for x in img_list]  # (1, 3, 4) が ３つ			
print(img_list[0].shape)  # -> (1, 3, 4)			
			
all_images = np.concatenate(img_list)  # axis=0 で連結			
print(all_images.shape)  # -> (3, 3, 4)	

しかしうまく切り取ることができませんでした。
何かいいサイトなどアドバイスなんでもかまいません。
よろしくお願い致します。

Answer 1

除算するときに a = a / 255 とすると、除算した結果が格納された別の numpy 配列が作成されてから a に代入される形になるので、一時的に a と同じサイズの配列がもう1つ作られることになります。

他方、a /= 255 とした場合、除算した結果を元の配列 a に直接格納する形になるので、a と同じサイズの配列が作られず、メモリ使用量も半分になりますが、いかがでしょうか。

# 1
a = np.arange(100).astype(float)

a = a / 255
print(a)

# 2
a = np.arange(100).astype(float)
a /= 255
print(a)

Comments

[dendenmushi]

すごいですね。ありがとうございます。試してみます。
因みに行列の足し算も質問継続させてください。

[dendenmushi]

----> sevasutyan /= 255

TypeError: No loop matching the specified signature and casting
was found for ufunc true_divide

上記のようになってしまいました。

Answer 2

savasutyan[0]をappendしていけば一万ずつ区切ることができることがわかりました。お騒がせ致しました。