ファイルの2行目以下が空のファイルだけ消す方法

Question

実現したいこと

data1.csvは以下のようなファイルです。
Run　 p T
1501 0.7 500
1503 1.4 700

data2.csvは以下のようなファイルです。
Run　 p T
（data2.csvはヘッダーだけのファイルです）

このとき、data2.csvだけを消去するにはどのようにすれば良いでしょうか。

実際にはdata1.csvのようなファイルもdata2.csvのようなファイルもたくさんあるので、
ある条件式を満たすものをglobで集めて消す、というような作業になるのかなと漠然と考えています。

該当のソースコード

import os

os.remove("data2.csv")

########globを使って書く場合
import os
import glob
    
path = './*.csv'
filelist = glob.glob(path)
print(filelist)#['.\\data1.csv', '.\\data2.csv']

試したこと

「python ファイルの2行目以下が空の場合」で検索してみましたが、よく分かりませんでした。

Comments

[otn]

> 「python ファイルの2行目以下が空の場合」で検索してみましたが、よく分かりませんでした。
「ファイルの2行目以下が空の場合」というのが曖昧だからかも知れません。
melianさんの回答は冒頭に書かれているとおり「中身が1行だけのファイルを削除する」ですが、
1行目に「Run　 p T」とかあって、2行目以降は存在するけど空行（改行だけの行）の場合にも、
「ファイルの2行目以下が空の場合」が該当するかもしれません。

何故「ファイルの中身が1行だけ」と書かずに、「ファイルの2行目以下が空の場合」みたいに書いたんだろうと考えると、おそらくこうでしょうか。
Excel等のスプレッドシートプログラムで1行だけのCSVファイルを開くと、2行目以降も存在するように見えて、ただし、2行目以降はセルの中に何も入っていないという状態なので、Excel画面を見たまま描写すると「ファイルの2行目以下が空の場合」になりますね。
これはなるほどです。

Excelで、「2行目以降は存在するけど空行（改行だけの行）」のCSVファイルを開いて、「名前を付けて保存」でcsvファイルかtxtファイルに保存すると1行だけのファイルになりますね。これもなるほど。
Excel以外のスプレッドシートは確認していませんが、おそらく同じですかね。

スプレッドシートじゃなくて、一般のプログラミング言語やテキスト処理ツールだと、空行は空行として存在するとして扱われる(※)ので、そのあたりは厳密に書く必要があります。

（※：テキストエディターで、保存時にファイル末尾の空行を削除する機能があったりしますし、他にも例外ケースあり）

[yyicp]

>otn様
コメントありがとうございます。

data1.csv、data2.csvのようなファイルは実験データ（値は適当です）で、計測機器から自動で生成、出力されるものです。そのため、ヘッダ部分（Run　 p T）は必ず存在するので、「ファイルの2行目以下が空の場合」のような書き方になってしまいました。

勉強になりました。

[otn]

スプレッドシートに読み込んだ画面を見ての描写ではないということでしょうか？
そうだとすると、ストレートに「ファイルの中身はヘッダのみ」「ファイルの中身が1行」とかでなく、何故そんなあいまいな表現になったのか不思議です。

[yyicp]

>otn様
ファイルをExcelで開いてみた結果を見て、「ファイルの2行目以下が空の場合」と表現しました。
結果的には、検索ワードが良くなかったということで、勉強になりました。

[otn]

やはりそうですか。であれば、
> 結果的には、検索ワードが良くなかったということで、
検索の仕方というより、「ファイルの2行目以下が空の場合」と思ったこと自体が良くないので、そう見えた原因である「CSVファイルの中身を確認するのにExcelを使った」ことが良くなかったということかと思います。エディターで開けば良かった。

[yyicp]

>otn様
確かにエディターで開けば良かったですね。
どうもありがとうございました。

Answer 1

既に解決済みなので御参考ですが，ファイルの内容が提示されているような形式ならデータフレームとして読み込み，行数（df.shape[0]）が 0 の場合にファイルを削除するという方法も考えられます。

なお，下記の記述例ではファイル内の区切り文字は空白（sep=' '）としましたがタブ等なら適宜変更ください。

import os
import glob
import pandas as pd

for fn in glob.glob('./*.csv'):
    df = pd.read_csv(fn, sep=' ')
    if df.shape[0] == 0:
        os.remove(fn)
        print(f'{fn} is removed.')
# ./data2.csv is removed.

Comments

[yyicp]

できました。
どうもありがとうございました。

Answer 2

#以下は「2行目が無いファイル(1行だけのファイル)を削除する」という処理になっています。

import os
import glob
    
path = './*.csv'
filelist = glob.glob(path)

for file in filelist:
    f = open(file)
    f.readline()
    if not f.readline():
        f.close()
        os.remove(file)

#for file in filelist:
#    with open(file) as f:
#        f.readline()
#        if not f.readline():
#            os.remove(file)

Comments

[yyicp]

ありがとうございます。

私の環境では以下のようなエラーが出てしまいます。
Traceback (most recent call last):
File "〇〇〇\testCV474.py", line 16, in <module>
os.remove(file)
PermissionError: [WinError 32] プロセスはファイルにアクセスできません。別のプロセスが使用中です。: '.\\data2.csv'

再起動しても解消されませんでした。
data1.csvではなく、data2.csvに対してエラーが出ているのが何かヒントになるでしょうか。

[melian]

ファイルをopenしたままで削除しているのでエラーとなっているのかもしれません。(Linux では問題なし) なので、ファイルをcloseしてから削除する様に書き換えてみました。これで試してみて下さい。

[yyicp]

できました。
どうもありがとうございました。

[winterboum]

「Linux では問題なし」
unix系のOSでは rmするfileがopenされている場合は dir情報からは削除するがfileの削除は行わない：closeされるまで再利用・上書きされない 様になってるので大丈夫なのでしょう