ファイル名の置換スクリプト

Question

前提・実現したいこと

RHEL7.x にてバックアップするシェルスクリプトを作成しようとしています。

やりたいこととしては、
特定のフォルダに生成されたファイルが多数あります。
このファイルは命名規則があって
AAA_somu_YYYYMMDD.csv
AAA_keiri_YYYYMMDD.csv
BBB_keiri_YYYYMMDD.csv
CCC_somu_YYYYMMDD.csv

のように、
最初3文字、部門、日付といったファイル名になっています。
これをバックアップしたいのですが、ファイル名を置換させたいです。

AAA_somu_YYYYMMDD.csv → XXXX01AA.csv
AAA_keiri_YYYYMMDD.csv → XXXX02AA.csv
BBB_keiri_YYYYMMDD.csv → XXXX02BB.csv
CCC_somu_YYYYMMDD.csv → XXXX01CC.csv

ファイル名の先頭3文字を、後ろに2文字に置き換え（3文字目はカット）
somuは01、keiriは02にコード化させたいです。
先頭4文字は固定です。

ファイル数がたくさんあるため、シェルで回したいと思いますが
ファイル名の置換でつまづいてます。
renameコマンドの検討もしてみましたが、REHLではutil-linuxだったりして上手く行きませんでした。
どのような方法がとれますでしょうか。
お手数をおかけしますが、よろしくお願いいたします。

追加情報

皆様からいろいろご教授いただきありがとうございます。
申し訳ありませんがもう少し条件をつけさせてください。

各ファイルのディレクトリを別々に配置したいと思います。
最初3文字のディレクトリはファイル名の3文字と同一です。
必ず英文字で数字や記号は入りません。

/file/AAA/AAA_somu_YYYYMMDD.csv
/file/AAA/AAA_keiri_YYYYMMDD.csv
/file/BBB/BBB_keiri_YYYYMMDD.csv
/file/CCC/CCC_somu_YYYYMMDD.csv

個別でご質問いただいておりました日付に関しては、ファイル名リネーム後に空っぽにする処理を別途行っております。
生成されるファイル時点では必ず空になっている状態にしています。
/file/AAA
/file/BBB
/file/CCC
という状態になっています。

ご提示していただいた処理を、それぞれ試してみましたが上記のようなディレクトリ構成だと上手く行きませんでした。

 mv: `AAA_somu_20200430.csv' を stat できません: そのようなファイルやディレクトリはありません

Answer 1

bashでも文字列操作として、IFSとreadの組み合わせ等である程度はできます。
また、部門名からコードの変換は連想配列が使えます。

ここではechoに替えてますが、ls で出力された一覧からmvコマンドを構成するサンプルは次の通りです。
※AAAやBBBの所に_があるとアウトですが

なお、先頭が3文字、部門名が既知のもので、拡張子が csv というのはチェックを入れている ( 条件に合わなければ continue でスキップ ) のですが、ここを緩くするか厳しくするかはお好みでどうぞ。
※あと、日付をどうするかの判断はなんとも言えないところです。

declare -A OU_CODES
OU_CODES[somu]=01
OU_CODES[keiri]=02

ls | while IFS=_. read t1 t2 t3 t4; do
  [[ ${#t1} -eq 3 && $t4 = csv && -n $t2 ]] || continue
  oucode="${OU_CODES[$t2]}"
  [[ -n $oucode ]] || continue
  echo "mv ${t1}_${t2}_${t3}.csv XXXX${oucode}${t1:0:2}.csv" </dev/null
done

Comments

[yakitori881]

ご教授いただきありがとうございます。こちらはカレントディレクトリでないと処理できないでしょうか？

[angel_p_57]

このサンプルはカレントディレクトリで処理する例ですね。
「実行ディレクトリに関わらず」ということであれば、次のようにアレンジできます。

```
ls $SOURCE_DIR | while …
…
mv $SOURCE_DIR/～ $DESTINATION_DIR/～
done
```

[yakitori881]

ありがとうございました。ご提示いただいた方法ベースに実現できそうです。

Answer 2

似たようなものですが、これの出力をシェルに流してください。
ファイル名のチェックはしていません。

#!/bin/bash
declare -A dept=( [somu]=01 [keiri]=02 )
root=/file
header=XXXX
for f in $(find $root -type f -name '*_*_[0-9]*.csv')
do
  set $(echo ${f##*/} | (IFS=_ read f1 f2 f3; echo $f1 $f2))
  #mv $f ${f%/*}/${header}${dept[$2]}${1:0:2}.csv
  echo "mv $f ${f%/*}/${header}${dept[$2]}${1:0:2}.csv"
done

file
├── AAA
│   ├── AAA_keiri_20200501.csv
│   └── AAA_somu_20200501.csv
├── BBB
│   └── BBB_keiri_20200501.csv
└── CCC
    └── CCC_somu_20200501.csv

file
├── AAA
│   ├── XXXX01AA.csv
│   └── XXXX02AA.csv
├── BBB
│   └── XXXX02BB.csv
└── CCC
    └── XXXX01CC.csv

Comments

[yakitori881]

回答ありがとうございます。さまざまな方法があることをしれて、とても勉強になりました！次もご教示いただけたら幸いです。

Answer 3

次のAWKスクリプトをrename.awkで保存しchmod 755 rename.awkしておきます。

#!/usr/bin/awk -f

BEGIN {
    FS = "_"
    bushoMap["somu"] = "01";
    bushoMap["keiri"] = "02";
}
length($1) >= 2 && $2 in bushoMap && $3 ~ /[0-9]{8}.csv/ {print "mv " $0 " XXXX" bushoMap[$2] substr($1,2) ".csv"}

次にファイル名を引き渡すとmvしてくれます。

ls *.csv | ./rename.awk | sh

一応AA_busho_NNNNNNNN.csvと言うファイル名の形式とbushoが既知かどうかチェックしていますが、実戦で使うにはもうちょっとエラーチェックが必要かもしれません。

ところで本当に日付は削っていいのですか？もしBBB_keiri_20200401.csvとBBB_keiri_20200402.csvがあったら両者ともXXXX02BB.csvになってしまいませんか？

Comments

[yakitori881]

ご回答ありがとうございます。日付ごとにバックアップを取った後に空っぽにする処理を別途行っており、生成されるファイルの置き場所には、常に空っぽの状態にします。
バックアップ→削除処理（ここまでが前日）→フィアル生成→リネーム→バックアップ・・・という流れを想定しています。

[yakitori881]

回答ありがとうございます。勉強になりました！次もご教示いただけたら幸いです。

Answer 4

perlでシェルスクリプトを作るという方法を考えてみました。

 ls *.csv | perl -ne 'BEGIN{%x=(somu=>"01",keiri=>"02")} chomp; $f=$_; s/(..)._([a-z]+)_.*/"XXXX".$x{$2}.$1.".csv
"/e; print "mv $f $_\n"' | sh

シェルスクリプトを介さずともperlの中で処理を完結させることもできますが、実行する前に前後のステップの確認もしたいところでしょうし、perlに慣れていないならこのパターンが安全かなと思いました。

追記事項に対応し、なおかつ冗長なコードを整理

ls /file/*/*.csv |  perl -pe 'BEGIN{%x=(somu=>"01",keiri=>"02")} chomp; $f=$_; s{(.*)/(..)._([a-z]+)_.*}{"mv $f $1/XXXX$x{$3}$2.csv"}e' > test.sh

できたtest.shをシェルスクリプトとして実行。

Comments

[yakitori881]

追加のご回答ありがとうございます。早速試しましたが、test.shを実行したところ
mv: 宛先の `/file/AAA/XXXX02AA.csv' はディレクトリではありません
となってしまいました。。。

[KojiDoi]

私が想定しているのと状況が違うのでしょうか。
test.shの内容はどうなっていますか？

[yakitori881]

ご回答ありがとうございます。
前の文字列と、mvが連続してしまっていました。
ですが、とてもためになりました！ありがとうございます。