Dockerコンテナのメモリ使用量が上限に達しない

Dockerのメモリ上限を16Gに引き上げたものの、
重い処理をしているコンテナのメモリ使用量が2Gしかないです。
2G以上使われないのはなぜでしょうか？

また、１度の処理に数時間かかってしまいます。
処理を終える速度を上げるためにはCPUやメモリ上限を引き上げる以外に
何か方法はありますでしょうか。

設定

Dockerの設定

docker stats

CONTAINER ID        NAME                CPU %               MEM USAGE / LIMIT     MEM %               NET I/O             BLOCK I/O           PIDS
2dc9e023ac35        modest_benz         299.20%             1.975GiB / 15.65GiB   12.62%              312kB / 5.27MB      6.72GB / 147kB      33

環境

macOS High Sierra (v.10.13.5 メモリ 16G)
Docker (v.18.06.1 stable)

行動規範の内容に同意します

回答1件

ベストアンサー

メモリを消費すれば早く終わるような処理ですか？

どのようなプログラムを走らせようとしているのですか？

処理を早く終わらせるには、
①よりよいCPUを買う
②アルゴリムを工夫する
のが一般的です。

メモリIO・容量がボトルネックである確証があるのなら話は別ですが。

投稿2018/09/08 06:37

mkgrei

総合スコア8560

Panda_Program

2018/09/09 02:21 編集

回答ありがとうございます。走らせているプログラムは、自然言語処理の前処理の段階で、分ち書きにしたテキストをword2vecで単語をベクトル化する処理です。実行したコードは下記の通りです。 ``` from gensim.models import word2vec sentences = word2vec.Text8Corpus('./wiki_wakati.txt') model = word2vec.Word2Vec(sentences, sg=1, size=100, window=5) model.save("./wiki.model") ``` ②のアルゴリズムは改善しようがないので、もし早くしようとするなら①になるのですね。低レイヤーの理解が浅く、メモリを消費すれば処理が早くなるものと思っておりました。もしよければこのあたりの知識を得るために有用なサイトや書籍など紹介していただけると幸いです。よろしくお願いします。