Python 分割圧縮の実装

Question

Pythonで何十GBと言ったフォルダもzipfileで圧縮できそうということがこちらのサイトの質問で解答いただいてわかりました。

もう一つ問題に気が付きまして
WindowsPCでコピーで扱える最大サイズを超えるような場合の対応について質問させてください。

圧縮したものは持ち運びコピーでPCに移したりします。

調べたところによると

Windows7
ファイルシステム NTFS

ではコピーで扱える最大サイズが16GBとの情報を得ました。

コピーできないのは困るので
分割圧縮などの対応を行う必要が出てきそうなのですが
何かいい方法はないでしょうか?

Comments

[8524ba23]

想定している持ち運び媒体の種類（USBメモリ、SDカードなど）とそのファイルフォーマット（FAT32/exFAT/NTFS）およびサイズ（16GB）を追記ください。

Answer 1

まず、pythonの標準モジュールにはファイル分割・結合する機能はないようです。
よって自力でzipファイル(hoge.zipなど)から複数ファイル(hoge.01,hoge.02～など)に分割・結合する方法を考えます。

まず、任意のバイナリファイルの結合はWindowsのCOPY /B hoge.01 + hoge.02 + ... hoge.zipでできるので、os.system()なりで結合できます。

次に分割する方法を考えます。

方法１：pythonコードで行う。

zipファイルをバイナリとして開いて、指定サイズずつ複数ファイルに出力する方法です。
ちなみに結合も上記の逆処理なので同様の考えでできます。
具体的には以下が参考になります。
pythonでファイルの分割・結合
How can I split a file in python?

方法２：外部プログラムを利用する。

os.system()で呼び出せるコマンドラインで動作するプログラム(7-Zipなど)を利用します。
zip作成側マシンには外部プログラムををインストールする必要があります。
具体的にはWindowsでzipファイルを分割したり結合したりするが参考になります。

外部プログラムによっては分割・結合どちらも実行できるものがあるかもしれません（未調査）
また、Windows 標準の機能（makecab コマンド）でもファイルを分割することができるようですが、詳細手順は未調査です。
参考：Windows標準機能でファイル分割・結合

Answer 2

自己解決しました。
分割圧縮にこだわらなくても
1ファイルが何十GBを超えるわけではないので
普通にサブフォルダごとなどで分けて圧縮していくだけで対応できそうです。