大量ファイルのzip圧縮方法

Question

下記のような感じでエラーが出ます。
解決方法を教えてください。

実行コマンド：
/usr/bin/find /home/user/files/*.xlsx -mtime -1 -type f -print0 | xargs -0 zip -j -0 /home/user/files/20180324.zip

返ってくるエラー：
bash: /usr/bin/find: 引数リストが長すぎます

経緯：
もともと、単純なzipコマンドで大量のファイルを圧縮したかったのですが、「引数リストが長すぎます」エラーが出たため、
上記のfindコマンドを噛ます形にしておりました。

最近圧縮対象ファイル数が増えたためか、上記コマンドでも「引数リストが長すぎます」エラーが出るようになってしまいました。
圧縮対象ファイルは35000個ほどのExcelファイルです。
※phpexcelで、centos上で生成したものです。

解決方法がわかる方、お教え頂けないでしょうか。

Answer 1

こんな漢字で、

$ /usr/bin/find /home/user/files -name '*.xlsx' -mtime -1 -type f -print0 | xargs -0 zip -j -0 /home/user/files/20180324.zip

追記

/usr/bin/find /home/user/files/*.xlsx ...

これだとfindが実行される前にbashがファイル名を全て展開しようとするので問題のエラーが発生します。

Comments

[退会済みユーザー]

漢字→感じさえなければ・ｗ・

[kazunii_ac]

ありがとうごうざいます！！！解決したっぽいです！！
対象データ量が多いせいかだいぶ時間がかかっておりまして、いま実行中なのですが、まだ結果を確認できていません。
処理終了しましたらまたご連絡します！！！

[kazunii_ac]

バッチリ正常終了したことを確認できました。
ありがとうございます～～！！！

Answer 2

findをかますといっても、これではfindが仕事する前にシェルがワイルドカードを展開しようとするので、「引数リストが長すぎます」エラーへの対処としては意味がありません。
hichon氏が示しているように-name '*.xlsx'としてやれば展開なくfindに渡されるので、問題は発生しません。

また、下位ディレクトリの操作が必要ないならfindを使う意味はますますありません。シェルのforループを使うのが手軽でしょう。

for a in *.xlsx; do zip $a ; done

Comments

[otn]

これは、シェルのワイルドカード展開なので、同じ問題が発生する可能性があります。ディレクトリに移動してから実行するとディレクトリの分だけ短くなるので、大丈夫かも知れませんが、それならzip一発でも同じ。
あと、xargs を使わないとファイル数だけzipを実行するので時間が掛かります。

[KojiDoi]

for の時にもワイルドカード展開が行われるというご指摘と思いますが、私が実験してみた限りはそうはなりませんでした。

[KojiDoi]

それと、ファイル数だけzipが実行されるのはxargsでも同じなのでは？

[otn]

> 私が実験してみた限りはそうはなりませんでした。
ほんとだ。
set -x してみると*がクォートされてますね。
失礼しました。

> ファイル数だけzipが実行されるのはxargsでも同じなのでは？
こっちは違います。
システムの最大長もしくは指定した長さのコマンドライン長の範囲で、標準入力から読んだ行を横につなげます。

[KojiDoi]

>xargs
おおそれは知りませんでした。なかなか奥が深いですね。いつもxargs -i xxx {}みたいなのばかり使っているもので…。

Answer 3

xargsを使えばできますよ

Comments

[ikapy]

ごめんなさい。xargs使ってましたね。回答後に気がつきました。後があるみたいなのでひっこみます。

[kazunii_ac]

コメントありがとうございます！
xargs、ほぼ理解できてなくてコピペ君のまま作業してます。しっかり勉強しようと思いました。