google colabでデータセットを早く解凍する方法

Question

1.2GBのデータセットがあり、それをgoogle colabで読み込んでディープラーニングのモデルを作ろうとしています。しかし、colabでのデータセットの読み込みが遅くて全然終わりません。データセットをzipにして479MBまで圧縮して、それをgoogle driveにアップロードして、以下のコマンドでcolab内で解凍しようとしました。

!unzip Archive.zip

しかし、解凍は始まるものの3時間以上待っても終わらず、もっと早くできる方法があるのではないかと思い質問させていただいています。colabではGPUを使うように設定していて、小さいサイズのzipファイルは問題なく解凍できました。よろしくお願いします。

Answer 1

そのデータセットはローカルから落としていますか？もしそうだったら、githubとかをうまく使ったらいけたりするのでは、と思います。（colaboratory の git clone はとても早いので、、、）

Comments

[TakayukiOta]

githubのレポジトリにあるzipファイルをローカルにダウンロードしてから、google driveにあげています。
githubのレポジトリにあるデータセットをそのままcolaboratoryで使えるということですか？

[temps1101]

はい、そうです。