Pythonで４次元NumPy配列に３次元NumPy配列をappendしたい

Question

Pythonで４次元NumPy配列に３次元NumPy配列をappendしたいです。

ファイルにあるカンマ区切りの16値が1000行あります。
そのファイルデータを100までは３次元NumPy配列cprevに代入しています。
100以上はTensorFlowに利用するため、４次元NumPy配列Xに３次元NumPy配列をappendしたいですがうまくいきません。

X = np.append(X, cprev, axis=0)
のところで
ValueError: all the input arrays must have same number of dimensions
のようなエラーが出ます。

解決策をご教授ください。よろしくお願いします。

# 16値の1000行あるファイルを読み込む
datafile = 'data.txt'
with open(datafile) as f:
    srcdata = f.readlines()

n = 100

# データを保存するNumPy配列
cprev = np.zeros((n,4,4))
# TensorFlowのXデータ
X = np.empty((0, n, 4, 4), int)

for i in range( 1000 ):
    # １行にカンマ区切り16値を分割して配列へ
    spltDataArr = srcdata[i].split(",")
    # cprevの最終行へNumPy配列[4,4]にして追加
    cprev = np.append(cprev[n:], np.resize(spltDataArr, (4,4)) )
    
    # 500以上をXデータに保存
    if ( i >= n ):
        X = np.append(X, cprev, axis=0)

Comments

[hayataka2049]

appendの引数としているそれぞれの配列のshapeはいくつでしょうか？

[yamayamak]

質問の意図が理解していない可能性もありますが、

cprevは(100,4,4)の３次元配列になると思っています。
その３次元配列を４次元配列X = np.empty(x, 100, 4, 4)に1000から残り900行appendします。
（最初の100行は、cprevを満たすために使い、満たしてから４次元配列Xにappendします）

ですので、３次元配列(100,4,4)を４次元配列Xにappendしていきたいのですが、回答になっていますか？

Answer 1

3次元配列を4次元にreshapeしてからappendすればいいのではないでしょうか。

shapeを(100, 4, 4)→(1, 100, 4, 4)に変換すればndimが揃い結合が可能になります。

Comments

[yamayamak]

ありがとうございます。４次元に揃えれば良いと理解しました。。。
cprev = np.zeros((1,n,4,4))
cprev = np.append(cprev[1:n:], np.resize(spltDataArr, (4,4)) )
にして試しましたが、うまくいきませんが、下行のnp.appendは間違っていますでしょうか？
３次元の最終行に追加しているイメージですが。。。

[hayataka2049]

何がどううまく行かないのでしょうか？　詳しく説明してみてください。

[yamayamak]

ご指摘いただいたところは問題ないのかもしれませんが、
その前にデータがきちんと作れていないようでした。
そもそも、
cprev = np.append(cprev[1:n:], np.resize(spltDataArr, (4,4)) )
が意図した通りになっていませんでした。

cprevは16値(4,4)が100行ある３次元配列で、100行は常に最新の100行にしたいので、
最終行に(4,4)追加して、古い行から16値(4,4)が消えていくようにしたいのですが
その部分がうまく動作していません。

cprev = np.append(cprev[1:n:], np.resize(spltDataArr, (4,4)) )

の書き方はどのようにすれば良いかご教授頂ければ幸いです。

[yamayamak]

別の質問であげることにします。動作確認できればこちらも完了させて頂きます。