複数のcsvを平均化する

Question

Pythonで複数のcsvから同じセル同士の平均値を出したいと考えています.
例:
データ1 データ2
1 2 3 4 5 6
7 8 9 1 5 6

データ平均
2.5 3.5 4.5
4 6.5 7.5
のように出したいです

データは縦の数はバラバラで，横は75個並んでいます。1つのcsvのデータが多くて他が少ない場合は０にして加算平均したいです。
現在出ているエラーについて悩んでいます.
エラー文の改善だけでなく，ほかにおかしい箇所があったら教えてほしいです。
どうかご教授お願いします.

import pandas as pd
import csv

average_array = [[0 for i in range(75)] for j in range(450)]

#データ読み取り
df1 = pd.read_csv('front1shugou.csv', header=None)
df2 = pd.read_csv('front2shugou.csv', header=None)
df3 = pd.read_csv('front3shugou.csv', header=None)
df4 = pd.read_csv('s_front9shugou.csv', header=None)
df5 = pd.read_csv('s_front11shugou.csv', header=None)
df6 = pd.read_csv('s_front12shugou.csv', header=None)
df7 = pd.read_csv('s_front18shugou.csv', header=None)
df8 = pd.read_csv('s_front22shugou.csv', header=None)
df9 = pd.read_csv('s_front23shugou.csv', header=None)
df10 = pd.read_csv('s_front24shugou.csv', header=None)
df11 = pd.read_csv('s_front26shugou.csv', header=None)
df12 = pd.read_csv('s_front27shugou.csv', header=None)
df13 = pd.read_csv('s_front28shugou.csv', header=None)
df14 = pd.read_csv('s_front29shugou.csv', header=None)
for i in range(len(df1.values)):
    for j in range(len(df1[0].values)):
        sum_temp = df1.values[i][j]+df2.values[i][j]+df3.values[i][j]+df4.values[i][j]+df5.values[i][j]+df6.values[i][j]+df7.values[i][j]+df8.values[i][j]+df9.values[i][j]+df10.values[i][j]+df11.values[i][j]+df12.values[i][j]+df13.values[i][j]+df14.values[i][j]
        average_array[i][j] = sum_temp/14
print(average_array)

#データ書き出し
with open('ave_data.csv', 'w') as file:
    writer = csv.writer(file, lineterminator='\n')
    writer.writerows(average_array)

``````エラー
sum_temp = df1.values[i][j]+df2.values[i][j]+df3.values[i][j]+df4.values[i][j]+df5.values[i][j]+df6.values[i][j]+df7.values[i][j]+df8.values[i][j]+df9.values[i][j]+df10.values[i][j]+df11.values[i][j]+df12.values[i][j]+df13.values[i][j]+df14.values[i][j]
IndexError: index 75 is out of bounds for axis 0 with size 7

Comments

[meg_]

> データは縦の数はバラバラで，横は75個並んでいます。
データ数がバラバラなのに「for i in range(len(df1.values)):」としているので発生しているエラーではないでしょうか？

[Daaaaaaaaa]

どう変更すればエラーが出ないのでしょうか？

[meg_]

> Pythonで複数のcsvから平均値を出したいと考えています.
「平均」とはどういう基準での平均でしょうか？　具体例があると回答しやすくなるかと思います。

[Daaaaaaaaa]

異なるcsvの同じセル同士を平均したいと思っています。

[meg_]

追加の説明は質問に追記しましょう。この欄ですと他の回答者の目に触れにくいです。

[t_obara]

行数（縦の数）が異なるのであれば、多い分はどのように処理するのでしょうか

Answer 1

簡単にするために下記データとします。

data1
1,2,3,4
5,6,7,8

data2
10,20,30,40

pandasを使用した例です。

import pandas as pd
df1 = pd.read_csv('data1')
df2 = pd.read_csv('data2')

rowcount = max(len(df1),len(df2))
columncount = len(df1.columns)
if len(df1) < rowcount:
  df1 = df1.append(pd.Series([0]*columncount),ignore_index=True)
elif len(df2) < rowcount:
  df2 = df2.append(pd.Series([0]*columncount),ignore_index=True)

result = (df1 + df2) / 2
print(result)
# 0 1 2 3
# 0 5.5 11.0 16.5 22.0
# 1 2.5 3.0 3.5 4.0

説明のために2つのデータを扱っています。3つ以上のデータを扱う場合には適宜修正して使ってください。

Comments

[Daaaaaaaaa]

結果の３行の意味がわからないのですが、詳しく教えてもらってもいいですか？

[Daaaaaaaaa]

with open('ave_data.csv', 'w', newline = '') as file:
writer = csv.writer(file)
writer.writerows(result)
こういったプログラムを追記し，結果をcsvに書き出そうと思ったのですが、
writer.writerows(result)
_csv.Error: iterable expected, not int
というエラーが出てしましました。
これはデータが多すぎるというエラーなのでしょうか？

[Daaaaaaaaa]

理解できました。ご親切にありがとうございました。