Jupiter notebookでmnistのデータを

Question

前提

MacBook を使用し、anaconda、Jupiter notebookでコードを書いています。
python ライブラリの使い方という書籍の機械学習の章で
minstのデータを使用して画像認識プログラムの学習をする項目があるのですが
書籍どおりのソースコードを入力してもFileNotFoundErrorが出てしまいます

実現したいこと

ここに実現したいことを箇条書きで書いてください。

• このソースコードを動作できるようにしたい

発生している問題・エラーメッセージ

---

FileNotFoundError Traceback (most recent call last)
Input In [1], in <cell line: 30>()
25 images = np.frombuffer(imgpath.read(), dtype=np.uint8,
26 offset=16).reshape(len(labels), 784)
28 return images, labels
---> 30 x_train, y_train = load_mnist('data', kind='train')
31 x_test, y_test = load_mnist('data', kind='t10k')
33 print('訓練', x_train.shape,y_train.shape)

Input In [1], in load_mnist(path, kind)
13 labels_path = os.path.join(path,
14 '%s-labels-idx1-ubyte.gz'
15 % kind)
16 images_path = os.path.join(path,
17 '%s-images-idx3-ubyte.gz'
18 % kind)
---> 20 with gzip.open(labels_path, 'rb') as lbpath:
21 labels = np.frombuffer(lbpath.read(), dtype=np.uint8,
22 offset=8)
24 with gzip.open(images_path, 'rb') as imgpath:

File ~/opt/anaconda3/lib/python3.9/gzip.py:58, in open(filename, mode, compresslevel, encoding, errors, newline)
56 gz_mode = mode.replace("t", "")
57 if isinstance(filename, (str, bytes, os.PathLike)):
---> 58 binary_file = GzipFile(filename, gz_mode, compresslevel)
59 elif hasattr(filename, "read") or hasattr(filename, "write"):
60 binary_file = GzipFile(None, gz_mode, compresslevel, filename)

File ~/opt/anaconda3/lib/python3.9/gzip.py:173, in GzipFile.init(self, filename, mode, compresslevel, fileobj, mtime)
171 mode += 'b'
172 if fileobj is None:
--> 173 fileobj = self.myfileobj = builtins.open(filename, mode or 'rb')
174 if filename is None:
175 filename = getattr(fileobj, 'name', '')

FileNotFoundError: [Errno 2] No such file or directory: 'data/train-labels-idx1-ubyte.gz'

![イメージ説明](https://ddjkaamml8q8x.cloudfront.net/questions/2022-10-02/dc2ff3b6-9696-4858-bc12-d137790aa10b.png)

該当のソースコード

import os
import gzip
import numpy as np
import matplotlib.pyplot as plt


def load_mnist(path, kind='train'):
    import os
    import gzip
    import numpy as np

    """Load MNIST data from `path`"""
    labels_path = os.path.join(path,
                               '%s-labels-idx1-ubyte.gz'
                               % kind)
    images_path = os.path.join(path,
                               '%s-images-idx3-ubyte.gz'
                               % kind)

    with gzip.open(labels_path, 'rb') as lbpath:
        labels = np.frombuffer(lbpath.read(), dtype=np.uint8,
                               offset=8)

    with gzip.open(images_path, 'rb') as imgpath:
        images = np.frombuffer(imgpath.read(), dtype=np.uint8,
                               offset=16).reshape(len(labels), 784)

    return images, labels

x_train, y_train = load_mnist('data', kind='train')
x_test, y_test = load_mnist('data', kind='t10k')

print('訓練', x_train.shape,y_train.shape)
print('テスト', x_train.shape, y_test.shape)
print('最初のラベル', y_train[0])
plt.matshow(x_train[0], cmap='gray')
plt.show()

試したこと

同じ階層にデータがあるかを確認。
dataファイルとコードの名前を変更。
書籍に記載されているurl
https://github.com/zalandoresearch/fashion-mnist/blob/master/utils/mnist_reader.py
からコピペを試しました

補足情報（FW/ツールのバージョンなど）

Comments

[meg_]

ソースコードの体裁が崩れていますのでご確認ください。

[meg_]

> FileNotFoundError: [Errno 2] No such file or directory: 'data/train-labels-idx1-ubyte.gz'
'data/train-labels-idx1-ubyte.gz'とカレントディレクトリの関係はどうなっていますか？

[Yukisuke_m]

dataは同じ階層に置かれています、でいいのでしょうか
見当違いな事を書いていたら申し訳ありません

[jbpb0]

pythonのコードの一番最初の行のすぐ上に
```python
だけの行を追加してください
また、pythonのコードの一番最後の行のすぐ下に
```
だけの行を追加してください

または、
https://teratail.storage.googleapis.com/uploads/contributed_images/56957fe805d9d7befa7dba6a98676d2b.gif
を見て、そのようにしてみてください

現状、コードがとても読み辛いです
質問にコードを載せる際に上記をやってくれたら、他人がコードを読みやすくなり、コードの実行による現象確認もやりやすくなるので、回答されやすくなります

[jbpb0]

カレントディレクトリに「data」というディレクトリがあり、その「data」ディレクトリ内に「train-labels-idx1-ubyte.gz」とかのファイルが置いてある、というのが前提でコードが書かれてるように思います

pythonで下記を実行して、カレントディレクトリがどこかを確認してください

import os
print(os.getcwd())

カレントディレクトリに「data」というディレクトリはありますでしょうか？

上記が大丈夫ならですが、「data」ディレクトリ内に「train-labels-idx1-ubyte.gz」とかのファイルが置いてありますでしょうか？

[meg_]

Macはよく分からないのですが、train-labels-idx1-ubyteに拡張子が見えないのは非表示になっているからでしょうか？ gzファイルとして認識されていますでしょうか？

[Yukisuke_m]

重ね重ねありがとうございます、確認したところカレントディレクトリ内に『train-labels-idx1-ubyte』というファイルがあり.gzが抜けておりました。
保存するときに間違えていたようです。ありがとうございました

[jbpb0]

質問のコードの「def load_mnist(...」では、

> '%s-labels-idx1-ubyte.gz'

のように、ファイル名の末尾に「.gz」が付いてるのを前提にしてますが、質問の画像を見ると、実際のファイル名には末尾に「.gz」が付いて無いようです

【追記】
上のコメントを見る前に投稿してしまいました
失礼しました

[Yukisuke_m]

macの扱いに慣れておらず、DLする際に何らかの不手際があったようです。このような質問にも丁寧に答えて頂き皆様親切にありがとうございました。

Answer 1

初歩的なミスでした。DLする際にダブルクリックで済ませていた為拡張子がない状態で保存されていたようです