ファイル名の末尾の日付から最も古い日付のファイルを取得する方法を教えてください。

Question

前提・実現したいこと

CSVファイルをソースフォルダから格納先に移動し、格納先で削除するという処理をシェルで実装したいです。
具体的には末尾の日付のみが違うファイルがある場合にタイムスタンプが古いファイルか格納先に移動し、格納先フォルダのファイルをすべて削除した後、ソースフォルダに残っているタイムスタンプが新しいファイルを移動し、削除というループ処理をしたいです。
※日付のみ違うファイルは3つ以上あることを想定しています。

日付が最も古いファイルを移動する処理の実装でファイルから日付部分を取得する方法はわかるのですが、下記の実装方法を教えてください。
・最も日付が古いファイルを取得する
⇒取得したファイル名($f)を配列に格納し、日付部分を比較し、最も古いファイルをmvで移動する

また、IF文やループをたくさん記述しないといけないので、他の効率的なコードの書き方がないかを教えてほしいです。

/src/csv
FILE_A_yyyymmddhhmmss
FILE_A_yyyymmddhhmmss
FILE_A_yyyymmddhhmmss
FILE_B_yyyymmddhhmmss
FILE_B_yyyymmddhhmmss

該当のソースコード

############### ローカル変数定義 ###############
# ディレクトリ
CSV_SRC_DIR="/src/csv"                      # ソースディレクトリ
CSV_DST_DIR="/dst/csv"                      # 格納先ディレクトリ

# 検索キー
KEY_A=FILE_A
KEY_B=FILE_B

# カウント初期化
KEY_A_count=0
KEY_B_count=0

############### メイン処理 ###############
while <フォルダが空になるまで>; do

   ＃ディレクトリ移動
   cd $CSV_SRC_DIR

   # ファイル名取得
   array=($(ls -1tr /src/csv))

#ファイル名別の数をカウント
   for f in ${array[@]}; do

	if [[ $f == "$KEY_A"* ]]; then
		KEY_A_count=`expr $KEY_A + 1`

	elif [[ $f == "$KEY_B"* ]]; then
		KEY_B_count=`expr $KEY_B + 1`
   done

# ファイル移動
   for f in ${array[@]}; do
	if [[ $f == "$KEY_A"* ]]; then
		if [ $KEY_A_count -eq 1 ]; then
			mv $f $DST_DIR/RENAME_A.csv

		# 日付のみ違うファイル名が複数ある場合、タイムスタンプが古いファイルから格納フォルダに移動
		elif [ $KEY_A_count -gt 1 ]; then
                 # 日付が最も古いファイルを移動
				if [[ $f == "$KEY_A"* ]]; then
					array=("${array[@]}" "$f")
					DATE=`echo ${f##*_} | sed 's/.[^.]*$//'`
				fi
　　　　 else
                     :
        fi
fi

	if [[ $f == "$KEY_B"* ]]; then
             if [ $KEY_B_count -eq 1 ]; then
             mv $f $DST_DIR/RENAME_B.csv

             # 日付のみ違うファイル名が複数ある場合、タイムスタンプが古いファイルから格納フォルダに移動
              elif [ $KEY_B_count -gt 1 ]; then     
                 # 日付が最も古いファイルを移動
                 if [[ $f == "$KEY_B"* ]]; then
                       array=("${array[@]}" "$f")
                       DATE=`echo ${f##*_} | sed 's/.[^.]*$//'`
                 fi
              else
                        :
              fi
	   fi


    done

rm -f $CSV_DST_DIR
done

Comments

[otn]

タイトルが「タイムスタンプが最も古い」で、質問文中が「取得したファイル名($f)を配列に格納し、日付部分を比較し、」と矛盾してますが、もし本文が正しく、チェックするのはファイル名であり、タイムスタンプは関係ないということであれば、タイトルを変更しましょう。

[koichi8888]

ご指摘ありがとうございます。タイトルを変更させて頂きました。実装したいことはファイル名の日付から判断したいです。

[koichi8888]

タイムスタンプの場合でも同様ですが、$fを配列に格納し、比較する必要があると思うのですが、その実装方法が知りたいです。

Answer 1

ls -tr | head -1

Comments

[koichi8888]

ご回答ありがとうございます。headという便利コマンドがあるんですね！

[yambejp]

ごめんなさい、ファイル名から処理するんでしたね
私のはあくまでファイルの更新日の古い方からとる処理でした

Answer 2

質問の意味が「ファイル名の日付以外が同じファイルのうち、日付が最新のもの以外を移動する」ということでしたら、こんな感じでしょうか。

cd $CSV_SRC_DIR
mv $(ls | sed -e 's/(.*)_(.*)/\1 \2/' | sort -r -k1,2 | awk '{ if(p==$1){ printf "%s_%s\n", $1, $2 }; p=$1 }') $CSV_DST_DIR

Answer 3

・最も日付が古いファイルを取得する

⇒取得したファイル名($f)を配列に格納し、日付部分を比較し、最も古いファイルをmvで移動する

array=($(ls -1 /src/csv))でファイル名をセットすれば、arrayにはファイル名が辞書順に格納されるので、ファイル名の先頭部分が同じFILE_A_でその後が日時なら、最初に出てくるものが一番古い事になります。

2番目以降のファイルをどうしたいのか分からないけど、こんな感じで。

CSV_SRC_DIR=/src/csv
CSV_DST_DIR=/dst/csv

DoIt(){
    key=$1
    new=$2
    cd $CSV_SRC_DIR
    array=($(ls -1 $key*))
    count=${#array[@]}
    if [ $count -gt 0 ]
    then
        mv ${array[0]} $DST_DIR/$new
        unset array[0]
        for f in ${array[@]}
        do
            2つ目以降の処理（1つしか無ければこのループは回らない）
        done
    fi
}


DoIt FILE_A RENAME_A.csv
DoIt FILE_B RENAME_B.csv

Comments

[koichi8888]

ご回答ありがとうございます。辞書順でソートすれば、日付の古い順になるんですね！下記のようにcountせず、古い日付のファイルを一つずつ移動し、whileでフォルダが空になるまでファイル移動⇒移動先で削除をループする処理にしました。
src_dir=/src
dst_dir=/dst

DoIt(){

key=$1
new=$2

cd ${src_dir}
# 辞書順でソート
f=($(ls -1 | grep "$key" | head -1))

if [ -n "$f" ]; then
mv $f $dst_dir/$new #修正
fi

}

while [ -n "$(ls $src_dir)" ]; do

DoIt FILE_A RENAME_A.csv　#修正
DoIt FILE_B RENAME_B.csv　#修正

rm -f $dst_dir

done

[otn]

↑なんんか変ですけど、大丈夫でしょうか？

[koichi8888]

すみません、修正しました！

[otn]

そこもですけど、最古のファイルを移動させて、whileループでまた次に古いファイルを移動させて、また次に古いファイルを移動させて、、、、、、と空になるまで処理すると結局最後に一番新しいファイルでmvで上書きすることになるのでは？

[koichi8888]

ループを一回したら、rm -f $dst_dirで移動先のディレクトリの中身をすべて削除する処理なので、上書きすることはないと思っています。

[otn]

移動先を消したら、移動する意味が無いのでは？

[koichi8888]

説明不足ですみません、rmコマンドの部分は実際には別のスクリプトを呼び出して、そのスクリプトの最後にrmでディレクトリ配下のファイルが削除される処理になっております。説明で便宜上、rmコマンドとして記載しました。今回質問させて頂いた処理内容は意図した通りに動作しております。

[otn]

ということは、そもそも、「一番古いファイルを移動したい」じゃなくて、
「ファイルを古い順に1つずつ順番に処理したい」が質問すべき事だったのでは？

[koichi8888]

その通りですね。ループ処理という記述はしていたのですが、タイトルでそのように記述した方が良かったですね。