Q&A
中断・再開する手段は分からないです。負荷を下げるのであれば以下が参考になるかもしれません。tarコマンドの負荷を減らしたい cstreamを使ってみた：http://toconango.hatenablog.com/entry/2016/04/20/110322
レンタルサーバーで
一日のデータを保存、zip保管しているのですが、
１日分が多くなった関係で、
zipコマンドが途中でkillされるようになりました。
（レンサバの仕様で、一定以上高負荷だとkillされる）
レンサバなので、
killを回避する方法はありません。
「１日分を分割」するのもデータの性格上やりたくはありません。
他のマシンへ移行する事は、今の所考えていません。
ですので、
途中でkillされても、
圧縮を途中で再開できるコマンド、ツールなどないでしょうか？
回答2件
0
「１日分を分割」するのもデータの性格上やりたくはありません。
gzipの場合、圧縮ファイルをcatで連結することが出来ます。理由は以下。
RFC 1952 GZIP File Format Specification
従って、
0. splitコマンドで分割
例：split -n 2 src chunk.
0. それぞれgzip
例：gzip chunk.*
0. catで結合
例：cat chunk.*.gz > dst.gz
0. 後処理（中間ファイル削除等）
という手順によって、分割圧縮後に結合する事が出来ます。
これを利用することで目的が達成できませんか？
投稿2018/03/01 00:57
総合スコア181
単純連結すると解凍結果が連結されるとは・・・うまいことできているものですね！
0
cat file | gzip > test.csv.gz
のようにパイプで受け取ったstdinの内容を圧縮できますが、もしkillされる条件が「一定時間以上連続して高負荷なこと」で「途中CPUを使わない状態を作ればkillされない」なら、cat fileの部分で一定時間ごとにsleepするようなスクリプトを組めばなんとかなるような気がしました。
killされる条件が「一つのプロセスで一定以上CPUを消費すること」ならばこの方法ではNGですが・・・
投稿2018/02/26 07:13
総合スコア18406
ありがとうございます。
負荷軽減は試してみようと思います。
再開できる圧縮コマンドはないのでしょうか？
> 再開できる圧縮コマンド
自分はそういうものを知りません。
Zipなどの圧縮アルゴリズムは圧縮をするに従い変化してゆく内部状態を元に圧縮処理を行います。途中でkillされるとその内部状態が失われるため、最初から圧縮しなおさなければならないと思います。理論的には「最初からMバイトのみ圧縮したら処理を止める」「Mバイト目から指定の内部状態を復帰して圧縮を継続する」といった機能があれば継続可能だと思いますが、そのような機能がある圧縮コマンドがあると聞いたことが（自分は）ないです。
（内部状態＝辞書）を指定して圧縮することができるライブラリーがあったような気がしますが、コマンドレベルで中断・再開できるものなのかわかりません。
あなたの回答
tips
プレビュー
