別のファイルから値を読み込み書き込む

Question

前提・実現したいこと

２つのcsvファイルがあり，1つ目は16000行4列の配列で2つ目は1行10列の配列です．まず，この２つのファイルをリストとして読み込みました．この1つ目のファイルの３列目は0が1000個並べられた後5が500個並べられておりそれが16000まで規則的に続いています．この3列目が0の時は列を追加し0を出力，5であれば２つ目のファイルから読み込んでそれを追加した列に出力したいのですが，1回目の5が500個連続に並べられたとき，２つ目のファイルの1行1列目の値を追加し，2回目の5が500個連続に並べられたとき，2つ目ファイルの1行2列目の値を追加し，と5の連続が終わるまで同じことを繰り返し，書き込む数字だけ毎回違う数値にしたいのですがどういう風にプログラムを組めばよろしいのでしょうか．
また，使用しているpythonはpython3.7.9です．

１つ目のcsvファイルをリストとして出力
　　　　　・・・
['0.001', '0', '5', '-10']
['0', '-0.001', '5', '-10']
['0', '-0.001', '5', '-10']
['0', '-0.001', '5', '-10']
['0', '-0.001', '5', '-10']
['-0.001', '-0.001', '5', '-10']
['-0.001', '-0.001', '5', '-10']
['-0.001', '0', '5', '-10']
['-0.001', '-0.001', '5', '-10']
['-0.001', '-0.001', '5', '-10']
['-0.001', '-0.001', '5', '-10']
['-0.001', '-0.002', '5', '-10']
['-0.001', '-0.002', '5', '-10']
['-0.001', '-0.002', '0', '-10']
['-0.001', '-0.002', '0', '-10']
['-0.001', '-0.002', '0', '-10']
['0', '-0.002', '0', '-10']
['0', '-0.002', '0', '-10']
['0', '-0.002', '0', '-10']
['0.001', '-0.002', '0', '-10']
['0.001', '-0.002', '0', '-10']
['0', '-0.002', '0', '-10']
['0', '-0.001', '0', '-10']
['0', '0', '0', '-10']
['0', '0.001', '0', '-10']
['0', '0.002', '0', '-10']
['0', '0.003', '0', '-10']
['0', '0.003', '0', '-10']
　　　　　・・・

２つ目のcsvファイルをリストとして出力
['7.000000000', '8.000000000', '1.000000000', '1.000000000', '4.000000000', '5.000000000', '9.000000000', '5.000000000', '1.000000000', '3.000000000']

発生している問題・エラーメッセージ

エラーメッセージ

該当のソースコード

import glob
glob.glob("/data/*")
glob.glob("/data/*20201124 脳波/*")
glob.glob("/data/*20201124 数字配列/*")

import csv
import numpy as np
with open('/data\20201124 数字配列\OpenBCI_2020_11_25_16_06_55.csv', 'r') as csvfile:
    count_file = csv.reader(csvfile)
    for row1 in count_file:
        print(row1)

with open('/data\20201124 脳波\OpenBCI_2020_11_25_16_06_55.csv', 'r') as csvfile:
    eeg_file = csv.reader(csvfile)
    for row2 in eeg_file:
        if "0" in row2[2]:
            row2.append("0")
        else:
            row2.append(row1)
        print(row2)

試したこと

上記のプログラムを組んで実行したのですが，このように3列目が5の時２つ目のファイルをすべて書き込んでしまい上手にいきませんでした．（１部抜粋）

['-0.004', '0.001', '5', '-10', ['7.000000000', '8.000000000', '1.000000000', '1.000000000', '4.000000000', '5.000000000', '9.000000000', '5.000000000', '1.000000000', '3.000000000']]

また，３列目が0の時は0を書き込むというプログラムは上手にできました．

また，出力した結果としては，　
　　　・・・
['0.001', '0', '5', '-10','7']
['0', '-0.001', '5', '-10','7']
['0', '-0.001', '5', '-10','7']　　　　一回目の5の塊
['0', '-0.001', '5', '-10','7']
['0', '-0.001', '5', '-10','7']
     ・・・
['-0.001', '-0.001', '5', '-10','8']
['-0.001', '-0.002', '5', '-10','8']
['-0.001', '-0.002', '5', '-10','8']　　二回目の5の塊
['-0.001', '-0.002', '5', '-10','8']
['-0.001', '-0.002', '5', '-10','8']
['-0.001', '-0.002', '5', '-10','8']
　　　．．．
　　　・・・

補足情報（FW/ツールのバージョンなど）

ここにより詳細な情報を記載してください。

Comments

[ayousanz]

ソースコードはハイライトにするために，コードの書き方に沿って記載してください
また使用しているpython,その他の開発環境等も記載したほうがいいかと思われます．

[31___basketball]

ご指摘ありがとうございます．初めてこの質問を使用したので使い方が理解していなくて，読みづらくて申し訳ございません．また，何かあったらご指摘よろしくお願い致します．

[TakaiY]

1つめのファイル、2つめのファイルはほんとうにファイルの中身ですか？ これでは、CSVファイルではありませんよね？pythonで配列に読み込んだ後にprintで出力した内容ではありませんか？

[31___basketball]

申し訳ございません．その通りです．csvファイルを一度読み込んでそれをprintで出力したものとなります．ご指摘ありがとうございます．

Answer 1

row2.append(row1) で追加するのは、row1そのものではなく、row1のn番目の数字で、それは上から何番目の5の塊かによって変わるわけですよね？

であれば、「今何番目の5の塊にいるか」によって、追加する値を決定して、
「0の塊から5の塊に変ったタイミング」で値を増やします。

これが正しければ、最後のループのあたりをこのようにすれば、よいのではないかと思います。

number_index = 0     # 今何番目の5の塊にいるか
process_5 = False    # 5の塊を処理中か

with open('/data\20201124 脳波\OpenBCI_2020_11_25_16_06_55.csv', 'r') as csvfile:
    eeg_file = csv.reader(csvfile)
    for row2 in eeg_file:
        if "0" in row2[2]:
            process_5 = False
            row2.append("0")
        else:
            if not process_5:
                number_index += 1
                process_5 = True
            row2.append(row1[number_index])
        print(row2)

---

自分で考えてみたほうがいいと思いますが、row2の最初が使われない件を修正してみました。

number_index = 0     # 今何番目の5の塊にいるか
process_5 = False    # 5の塊を処理中か

with open('/data\20201124 脳波\OpenBCI_2020_11_25_16_06_55.csv', 'r') as csvfile:
    eeg_file = csv.reader(csvfile)
    for row2 in eeg_file:
        if "0" in row2[2]:
            if process_5:
                process_5 = False                
                number_index += 1
            row2.append("0")
        else:
            process_5 = True
            row2.append(row1[number_index])
        print(row2)

インデックスのインクリメントのタイミングを、5の塊を抜けたところ=0の塊に入ったところに変更です。

Comments

[TakaiY]

この処理だと、row2の最初の値が使われなくなってしまうかも。

[31___basketball]

回答してくださりありがとうございます．これをもとに少し変えてみて実行してみたらエラーでてきましたが自分の思い通りの出力結果に近づいてきました．試行錯誤してもできなかったらまた質問に書きたいと思います．ありがとうございました．

[31___basketball]

実行結果をよく見たらやはりrow1の一番最初の値が入っていなく，エラー結果でrangeが合っていないと出てしまいました．もう少し考えてみます．

[TakaiY]

方針は合っていそうなので、余計なお世話かもしれませんが、修正版を作ってみました。

[31___basketball]

私もさっき考えていたのですが，pythonが初心者なもので一番最初で定義したnumber_index＝０をnumber_index＝－１にしたらうまくいきました．でもこの考えだとちょっと安易的な考えになってその場しのぎになってしまうのかなと悩んでいました．修正版まで考えていただいて，本当に申し訳ないです．助かりました．ありがとうございます．

[TakaiY]

なぜその値にしてあるのかということが明確であれば、-1にするのも悪くないやりかただと思いますよ。
初期値をどんな値にすべきかというのは意外と難しい問題で、今回であれば、5が先に来る場合があるのであれば値が変ったり、両方に対応したければまた処理を変えなくてはならないかもしれないなど。

[31___basketball]

ありがとうございます．このプログラミングを通じて自分の力が少し上がったような気がします．今度プログラムをする機会があれば人に頼らず１からすべて作り上げたいと思います．ありがとうございました．

Answer 2

extendメソッドを使えば期待通りになるのではと思います。

        if "0" in row2[2]:
            row2.append("0")
        else:
            row2.extend(row1)

Comments

[31___basketball]

ご回答ありがとうございます．試してみたのですが，試したことの欄に書かれている通りの出力になってしまいました．ですが，ご回答のほう本当にありがとうございます．参考にしてみます．

Answer 3

自分なりに考えたプログラムを載せます．

i = 0
j = 0
with open('/data\20201124 脳波\OpenBCI_2020_11_27_10_42_34.csv', 'r') as csvfile:
    eeg_file = csv.reader(csvfile)
    for row2 in eeg_file:
        if "0.000" in row2[2]:
            if j != 0:
                j = 0
                i += 1
            row2.append("0.000")
        else:
            row2.append(row1[i])
            j += 1
        print(row2)

これでも上手に出力することができました．
回答してくださった方々本当に助かりました．
ありがとうございます．