csvファイルをPandasで読み込むと特定の列の要素がすべてNaNになってしまう

Question

前提・実現したいこと

数値データが入った複数のcsvファイル（0000.csv, 0001.csv, ..., 0039.csv）をDataFrameに格納したいです。
ただし、1つのcsvファイルには条件が異なる3つの水準で取得したデータが入っているので、それぞれの水準毎に分割し、別々のDataFrameを生成したいです。
また、0019.csv, 0036.csvについては、データ取得時の設定ミスの関係で、データを抜き出す範囲に気をつける必要があります。

発生している問題・エラーメッセージ

lowに格納されている0019の要素がすべてNaNになる。

該当のソースコード

import pandas as pd
import numpy as np
import matplotlib.pyplot as plt
import pathlib
import csv
import codecs
import os

csv_files = pathlib.Path("./data/Waves/").glob('*.CSV') #オブジェクトとしてcsvを取得
std = mid = low = pd.DataFrame([]) #標準・中・低のDataFrameを作成

for csv_file in csv_files:
    data = pd.read_csv(csv_file, skiprows=15, usecols=[1], names=[csv_file.stem])
    if csv_file == "0019.CSV":
        data1 = data[3000:8000]
        data2 = data[25000:30000]
        data3 = data[60000:65000]
    elif csv_file == "0036.CSV":
        data1 = data[10000:15000]
        data2 = data[80000:85000]
        data3 = data[150000:155000]
    else:
        data1 = data[10000:15000]
        data2 = data[50000:55000]
        data3 = data[120000:125000]

        std = pd.concat([std, data1.reset_index(drop=True)], axis=1)
        mid = pd.concat([mid, data2.reset_index(drop=True)], axis=1)
        low = pd.concat([low, data3.reset_index(drop=True)], axis=1)

"Header Size"           ,15              
"Model Name"            ,"DL850E        "
"Comment"               ,"                         "
"BlockNumber"           ,1               
"TraceName"             ,"CH1           "
"BlockSize"             ,85586           
"VUnit"                 ,"V             "
"SampleRate"            ,500.000000      
"HResolution"           ,2.000000e-03    
"HOffset"               ,-1.711700e+02   
"HUnit"                 ,"s             "
"DisplayPointNo."       ,1               
"PhaseShift"            ,1               
"Date"                  ,"2021/08/30    "
"Time"                  ,"16:15:36.60285918"

,-1.9067E+00,
,-1.9033E+00,
…

試したこと

dataの切り出し範囲に誤りはないか→問題なし
0019.csvのデータ自体に欠損値はないか→問題なし

###使用ツールVer.
Python 3.9.6
pandas 1.3.2
numpy 1.21.2

以上、よろしくお願い致します。

Answer 1

pathlib.Pathを使っているので、forループしているcsvfileはPathオブジェクトになっていると思います。
なので、csv_file == "0019.CSV"がTrueになることはないので、常に else のブロックを通っているのではないでしょうか。

csv_file.stem == '0019'やcsv_file.stem == '0036'とするのが良いと思います。

また、std = pd.concat(...)等の3つの行のインデントがおかしいです。
このままだと、elseブロックと同じになっているので、elseのときしか実行されません。

Comments

[katamalix]

ご回答ありがとうございます。
無事コードを実行することができました。
Pathオブジェクト・インデントに対する理解不足でした…
大変勉強になりました、ありがとうございました！