ゼロから始めるDeep Learningのmnistの読み込みについて

Question

ゼロから始めるDeep Learningを用いて機械学習を学んでいる者です。
いまmnistをつかった文字認識の部分を勉強しているのですが、エラーが出て困っています。
（サンプルプログラムファイルはダウンロード済みです）
やってみたこと
・datasetファイルを書いているプログラムのディレクトリと同じ場所に移した
・mnist.pyを実行して、4つのファイルを生成した

出たエラー
"C:\Users\keigo\Documents\python\Deep Learning\venv\Scripts\python.exe" "C:/Users/keigo/Documents/python/Deep Learning/3.6.1.py"
Traceback (most recent call last):
Converting train-images-idx3-ubyte.gz to NumPy Array ...
File "C:/Users/keigo/Documents/python/Deep Learning/3.6.1.py", line 6, in <module>
load_mnist(flatten=True, normalize=False)
File "C:\Users\keigo\Documents\python\Deep Learning\dataset\mnist.py", line 106, in load_mnist
init_mnist()
File "C:\Users\keigo\Documents\python\Deep Learning\dataset\mnist.py", line 76, in init_mnist
dataset = _convert_numpy()
File "C:\Users\keigo\Documents\python\Deep Learning\dataset\mnist.py", line 67, in _convert_numpy
dataset['train_img'] = _load_img(key_file['train_img'])
File "C:\Users\keigo\Documents\python\Deep Learning\dataset\mnist.py", line 59, in _load_img
data = np.frombuffer(f.read(), np.uint8, offset=16)
File "C:\Users\keigo\AppData\Local\Programs\Python\Python36\lib\gzip.py", line 276, in read
return self._buffer.read(size)
File "C:\Users\keigo\AppData\Local\Programs\Python\Python36\lib\gzip.py", line 482, in read
raise EOFError("Compressed file ended before the "
EOFError: Compressed file ended before the end-of-stream marker was reached
Process finished with exit code 1

google班訳に突っ込んでもよくわからなかったので、どなたか解決方法を教えてください。

あと、init.pyというファイルのソースを見たのですが、何も書かれていませんでした。これは大丈夫なのでしょうか。

ご回答よろしくお願いいたします。

Answer 1

こんにちわ

自分もpython初心者ですが、同様の教材で勉強していたため、わかることを回答させいただきます。
・同じエラーが出たことがあり、以下の方法で解決しました。
「dataset_dir = os.path.dirname(os.path.abspath('file'))」の前に以下のように
gzファイルが存在するディレクトリに移動させる。
os.chdir("C:\Users\XXXXXXXXXXX")
・利用しているソースがどんなものかわかるようにしたほうが回答者も回答しやすいと思います。
今回であれば、mnist.py なので、URLをはりつけるだけでも違うと思います。
http://localhost:8888/edit/Desktop/skillup_ai/zero%20make%20deep%20leanning/deep-learning-from-scratch-master/dataset/mnist.py
・__init__.py は空ファイルであることが正しいようです。
google先生などに聞いてみれば理由もわかると思います。

Comments

[cand]

ありがとうございました

[cand]

import sys,os
os.chdir("C:\Users\keigo\Documents\python\Deep Learning\dataset")
sys.path.append(os.pardir)
from dataset.mnist import load_mnist

(x_train, t_train), (x_test, t_test) = \
load_mnist(flatten=True, normalize=False)

print(x_train.shape)
print(t_train.shape)
print(x_test.shape)
print(t_test.shape)

このようにしましたが、

"C:\Users\keigo\Documents\python\Deep Learning\venv\Scripts\python.exe" "C:\Users\keigo\Documents\python\Deep Learning\3.6.1.py"
File "C:\Users\keigo\Documents\python\Deep Learning\3.6.1.py", line 2
os.chdir("C:\Users\keigo\Documents\python\Deep Learning\dataset")
^
SyntaxError: (unicode error) 'unicodeescape' codec can't decode bytes in position 2-3: truncated \UXXXXXXXX escape

Process finished with exit code 1

というエラーが出ました。
なぜでしょうか。

[sirokuma5296]

`C:\Users` で書いてみてもらえませんか？
「C:」の後だけ「\」です。

[cand]

変わりません

[sirokuma5296]

os.chdirの行をどのように変更したか見せていただけないでしょうか。

[cand]

再起動したら治りました。
ありがとうございました。