モジュールの保管場所

Question

生成Deep learningの第三章について
https://github.com/davidADSP/GDL_code
これらのモジュールをzipファイルでダウンロードし、解凍して以下のように保存しました。

03_01_autoencoder_train_.ipynbを開き、以下のように打ち込みました。
コード

import os
import utils

from utils.loaders import load_mnist
from models.AE import Autoencoder

---

エラーコード

ModuleNotFoundError Traceback (most recent call last)
<ipython-input-1-93c5bafff246> in <module>
2 import utils
3
----> 4 from utils.loaders import load_mnist
5 from models.AE import Autoencoder

ModuleNotFoundError: No module named 'utils.loaders'

---

OSはWindows１０です。
https://github.com/davidADSP/GDL_codeはcloneでダウンロードしようとしたのですが、うまくいかなかったので、zip形式でダウンロードしました。
なにをすればいいのかよくわかりません。
utilsの中にloadersが入っているのにうまく作動しないのはなぜでしょうか…
どのように改善すればよいでしょうか。
言葉の意味がよくわかっていないため、文章が伝わりづらいかもしれません…
何卒、よろしくお願いいたします。

Comments

[meg_]

試してみましたが「ModuleNotFoundError: No module named 'utils.loaders'」は発生しませんでした。
カレントディレクトリは”GDL_code-master”ですよね？

[akasatan]

少々お待ちください。確認いたします

[jbpb0]

カレントディレクトリがどこかを調べて、質問の画像のディレクトリと違う場合は、そこをカレントディレクトリにしてみてください

参考
https://note.nkmk.me/python-os-getcwd-chdir/

[akasatan]

jbpb0さん、ありがとうございます。私自身、カレントディレクトリがよくわかっておりませんので、調べてみます。確認いたします。

[akasatan]

import os
os.getcwd()
を03_01_autoencoder_trainで入力いたしました。
Out[1]:'C:\\Users\\user name(僕の名前）\\GDL_code-master'
が返ってきました。
この操作でカレントディレクトリを確認できていますでしょうか。

[meg_]

カレントディレクトリは合っているようですね。であれば「ModuleNotFoundError: No module named 'utils.loaders'」のエラーは発生しないはずですがおかしいですね。

[akasatan]

もう一度、zipファイルをダウンロードしなおしても意味がないでしょうか。また、jupyterがlocalhostとしているのは関係ないでしょうか。http://localhost:数字/tree/GDL_code-masterとなっています。

[jbpb0]

03_01_autoencoder_train.ipynb
の先頭に下記を追加して実行したら、どのように表示されますでしょうか？

import os
print(os.listdir('./utils'))

[akasatan]

jbpb0さん、ありがとうございます。
['callbacks.py', 'loaders.py', 'write.py']と出力されました。

[jbpb0]

> ['callbacks.py', 'loaders.py', 'write.py']と出力されました。

大丈夫ですね

エラーが出る行をコメント化(行頭に「#」を付ける)したら、次の

from models.AE import Autoencoder

は、正常に実行できますか？

[maskshitemask]

間違えました。

[akasatan]

以下、入力になります。
import os
import utils

#from utils.loaders import load_mnist
from models.AE import Autoencoder

エラーコードが出てしまいます。
ModuleNotFoundError Traceback (most recent call last)
<ipython-input-10-e56b95deac59> in <module>
3
4 #from utils.loaders import load_mnist
----> 5 from models.AE import Autoencoder

~\GDL_code-master\models\AE.py in <module>
7 from keras.utils import plot_model
8
----> 9 from utils.callbacks import CustomCallback, step_decay_schedule
10
11 import numpy as np

ModuleNotFoundError: No module named 'utils.callbacks'

[akasatan]

。

[jbpb0]

「models.AE」は「No module named」とならないので、「models」ディレクトリの「AE.py」は読めてますね

> No module named 'utils.callbacks'

「utils」ディレクトリの「callbacks.py」は、「loaders.py」と同様に読めてませんね

「models」ディレクトリは大丈夫なのに、「utils」ディレクトリはダメなようです
理由は分からないけど

githubから一式全部zipでダウンロードし直して、別の場所に展開してから、そちらで試してみてください

ところで、
import utils
は、何で付けてるのですか？
https://github.com/davidADSP/GDL_code/blob/master/03_01_autoencoder_train.ipynb
には、その行はありませんけど

この質問のエラーには関係ないとは思いますが、念のために、githubから再ダウンロードして展開してから試す際は、一番最初は「03_01_autoencoder_train.ipynb」は内容そのまま触らずに実行してみてください

[jbpb0]

> jupyterがlocalhostとしているのは関係ないでしょうか。http://localhost:数字/tree/GDL_code-masterとなっています。

それは大丈夫です

[akasatan]

ありがとうございます。今一度、githubからダウンロードしなおします。

[akasatan]

>ところで、
import utils
は、何で付けてるのですか？

モジュールのインポートができてないのかなと思いました（utilsをモジュールと呼ぶかはわからないですが）。やみくもにやってしまいました。

[akasatan]

zipファイルでもう一度ダウンロードし、すべて展開したのですが、同じエラーコードが出てしまいます。入力したコード
import os

from utils.loaders import load_mnist
from models.AE import Autoencoder

エラーコード
ModuleNotFoundError Traceback (most recent call last)
<ipython-input-2-01cd3755b1e5> in <module>
1 import os
2
----> 3 from utils.loaders import load_mnist
4 from models.AE import Autoencoder

ModuleNotFoundError: No module named 'utils.loaders'

入力したコード
import os

#from utils.loaders import load_mnist
from models.AE import Autoencoder

エラーコード
ModuleNotFoundError Traceback (most recent call last)
<ipython-input-1-72a5f21df836> in <module>
2
3 #from utils.loaders import load_mnist
----> 4 from models.AE import Autoencoder

~\Downloads\GDL_code-master (2)\GDL_code-master\models\AE.py in <module>
7 from keras.utils import plot_model
8
----> 9 from utils.callbacks import CustomCallback, step_decay_schedule
10
11 import numpy as np

jbpb0さん、たびたび申し訳ございません。
やはりutilsモジュールのインポートができません。

カレントディレクトリは
'C:\\Users\\iuser name\\Downloads\\GDL_code-master (2)\\GDL_code-master' です。

utilsモジュールに問題があるのでしょうか。

[jbpb0]

何でしょうね？？
「utils」ディレクトリの「loaders.py」を「03_01_autoencoder_train.ipynb」と同じディレクトリにコピーして、

from loaders import load_mnist

を実行したら、エラーになりますか？

[jbpb0]

「utils」が、他の何かと被ってるのかも

下記を実行した結果を教えてください

import utils
dir(utils)
print(utils.__path__)
print(utils.__file__)

[akasatan]

jbpb0さん、承知いたしました。確認致します。

[akasatan]

>「utils」ディレクトリの「loaders.py」を「03_01_autoencoder_train.ipynb」と同じディレクトリにコピーして、
from loaders import load_mnist
を実行したら、エラーになりますか？
import os

from loaders import load_mnist
from models.AE import Autoencoder
ModuleNotFoundError Traceback (most recent call last)
<ipython-input-3-40c37761298c> in <module>
2
3 from loaders import load_mnist
----> 4 from models.AE import Autoencoder

~\Downloads\GDL_code-master (2)\GDL_code-master\models\AE.py in <module>
7 from keras.utils import plot_model
8
----> 9 from utils.callbacks import CustomCallback, step_decay_schedule
10
11 import numpy as np

ModuleNotFoundError: No module named 'utils.callbacks'

>「utils」が、他の何かと被ってるのかも
import utils
dir(utils)
print(utils.__path__)
print(utils.__file__)
-----------------------------------------------------------------------------
['C:\\Users\\user name\\anaconda3\\lib\\site-packages\\utils']
C:\Users\user name\anaconda3\lib\site-packages\utils\__init__.py
となりました。

[jbpb0]

「utils」ディレクトリに置かず
from loaders import load_mnist
とすればエラーにならないことと、

> print(utils.__path__)
['C:\\Users\\user name\\anaconda3\\lib\\site-packages\\utils']

から、
「C:\\Users\\user name\\anaconda3\\lib\\site-packages\\utils」
の存在が邪魔をしていて、「utils」ディレクトリ内のファイルがimportできない可能性があります

「C:\\Users\\user name\\anaconda3\\lib\\site-packages\\utils」
を削除(condaかpipでuninstall)したら直るかもしれませんが、これが質問者さんにとって必要なものかもしれないので、素性が分からないと迂闊には削除できません
これを入れた心当たりはありますか？
(自分で直接入れてなくても、他の何かを入れた時に入ったかもしれませんが)

あるいは、「GDL_code」側の「utils」のディレクトリ名を変えてしまうか
ただし、「GDL_code」の全てのコード内の「utils」を、それに合わせて変更する必要があります

[akasatan]

ありがとうございます。再度、確認いたします。

[akasatan]

jbpb0さん、utilsの名前をutilに変えるとうまくいきました。

>C:\\Users\\user name\\anaconda3\\lib\\site-packages\\utils」
を削除(condaかpipでuninstall)したら直るかもしれません。
こちらなのですが、入れたことをおぼえておりません。utilsを確認したのですが削除するのは不安が残るので、名前を変更する方法でやりたいと思います。
親身に教えていただきありがとうございました。

Answer 1

カレントディレクトリがどこかを調べて、質問の画像のディレクトリと違う場合は、そこをカレントディレクトリにしてみてください

参考
Pythonでカレントディレクトリを取得、変更（移動）

　
上記を行なってもダメなら、「utils」が他の何かと被っていて、それが邪魔をしている可能性があります
下記を実行して、どこか全く別のディレクトリパスが表示されないか、確認してみてください

import utils
dir(utils)
print(utils.__path__)
print(utils.__file__)