NNCを実行しても動きません。

Question

NNCで有料のクラウドGPUで実行すると以下のエラーがでてうごきません。なぜでしょうか。
File "/opt/miniconda3/lib/python3.6/site-packages/nnabla/utils/network.py", line 187, in backward_function
seq.func.variable_inputs, seq.func.variable_outputs, seq.accum_grad)
File "function.pyx", line 214, in nnabla.function.Function.backward
RuntimeError: memory error in alloc
/home/gitlab-runner/builds/T5_EQA_B/0/nnabla/builders/console/nnabla/src/nbla/memory/memory.cpp:38
Failed this->alloc_impl(): N4nbla10CudaMemoryE allocation failed.
2021-01-17 16:08:18,946 [worker]: [ERROR]: console_cli command is failed.

#ネットワーク層
サンプルのutorial.basics.12_residual_learningです。
https://dl.sony.com/ja/project/

#用意したデータ
250×250のカラー
train 1406枚
validation 352枚

Comments

[jbpb0]

> CudaMemoryE allocation failed.

って書いてあるので、GPUのメモリーが足りないのではないですかね

> NNCで有料のクラウドGPUで実行

お金払ってるのなら、NNCの運営に問い合わせた方がいいと思いますけど

Answer 1

ネットワークの構造を変えると無事に動きました。