Docker上でのJupyter Notebookを使用した時のconda installの挙動

Question

Docker上でのJupyter Notebookを使用した時のconda installの挙動

MacにDockerでJupyter NotebookでTensorFlowを使えるようにしたいを参考にterminalで

docker run -it -p 8888:8888 --rm --name jupyter -v "$(pwd):/home/jovyan" jupyter/tensorflow-notebook

を実行する。
そうすることによって、ローカルをマウントしながらJupyterを使うことできる。
しかし、このままではPytorchが使うことが出来ないので、以下の画像のように

conda install -c pytorch pytorch

を実行した。
そうすることによって、/opt/condaというディレクトリにPytorchのライブラリが入ったことが分かる。
しかし、ローカルを見ても/opt/condaというディレクトリはなく、
Dockerを再び立ち上げるとPytorchのinstallがされてない状態に戻され再びinstallをすることによってどんどん容量を食ってしまう(新しいPytorchのライブラリがどんどん入る、同じディレクトリに入っているであろうPytorchを認識できない意味は理解できない)。

つまり今から行いたいことは/opt/condaに入ったであろうPytorchのライブラリの削除をすることです。

初学者でよく理解できていない点がありますが、回答して頂けると幸いです。
よろしくお願いいたします。

追記

jupyter/tensorflow-notebookというDockerのImageを完全に削除することで問題自体は解決することは出来ましたが、本質的な解決にはなっていないので、詳しい方がいれば教えて頂けると幸いです。

jupyter/tensorflow-notebookのimageはだいたい5GBだったのにも関わらず

docker rmi (jupyter/tensorflow-notebookのIMAGE ID)

を実行することで、15GBばかり容量が増えました。

Comments

[yurak]

本質的に解決したいことは何でしょうか。

Answer 1

時間がたっており、既に問題解決されているかもしれませんが、回答いたします。

容量が増えたのは docker run を実行するたびに、実行した Docker コンテナ専用ファイルシステムの /opt/conda' にインストールをしていたからです。そのため、コンテナを起動するごとに /opc/conda` へのインストールが繰り返されましたので、その分のディスク容量が増えていました。

また、イメージの容量を削除するとき、関連するコンテナも削除されたはずですので、結果的に 15GB 容量が増えた、という現象でした。

どう回避できたのか？を考えますと、 docker stop して停止したコンテナは docker start で再起動できました。毎回 docker run を実行しますと、都度新しい Docker コンテナを立ち上げてしまいますので、同じものを使うのであれば再度コンテナを立ち上げたほうがスマートでしょう。

あるいは、複数の Docker コンテナでデータ領域を共有する場合は、Docker ボリュームの機能を使い、コンテナ内の /opt/conda をホスト上に（ボリュームとして）バインドマウントする方法も考えられます。