書籍のサンプルコードがうまく動かない(書き間違えではないです)

Question

サンプルコードがうまく動かないです

書籍「PythonとKerasによるディープラーニング」のp.79のサンプルデータを走らせようとしたらエラーが起きてしまいました。
ネットで検索しても解決策が見つからなかったためここで質問させていただきます。
以下、実行したスクリプトを載せます。

from keras.datasets import reuters

(train_data, train_labels), (test_data, test_labels) = reuters.load_data(num_words=10000)

次にエラーメッセージを載せます。

エラーメッセージ

ValueError                                Traceback (most recent call last)
<ipython-input-22-bc6fd93a9796> in <module>()
      1 from keras.datasets import reuters
      2 
----> 3 (train_data, train_labels), (test_data, test_labels) = reuters.load_data(num_words=10000)


/usr/local/lib/python3.6/dist-packages/keras/datasets/reuters.py in load_data(path, num_words, skip_top, maxlen, test_split, seed, start_char, oov_char, index_from, **kwargs)
     55                     file_hash='87aedbeb0cb229e378797a632c1997b6')
     56     with np.load(path) as f:
---> 57         xs, labels = f['x'], f['y']
     58 
     59     np.random.seed(seed)

/usr/local/lib/python3.6/dist-packages/numpy/lib/npyio.py in __getitem__(self, key)
    260                 return format.read_array(bytes,
    261                                          allow_pickle=self.allow_pickle,
--> 262                                          pickle_kwargs=self.pickle_kwargs)
    263             else:
    264                 return self.zip.read(key)

/usr/local/lib/python3.6/dist-packages/numpy/lib/format.py in read_array(fp, allow_pickle, pickle_kwargs)
    690         # The array contained Python objects. We need to unpickle the data.
    691         if not allow_pickle:
--> 692             raise ValueError("Object arrays cannot be loaded when "
    693                              "allow_pickle=False")
    694         if pickle_kwargs is None:

ValueError: Object arrays cannot be loaded when allow_pickle=False

Comments

[tachikoma]

Issueが上がっていますね。https://github.com/tensorflow/tensorflow/issues/28102

[toshi77]

回答ありがとうございます！
これは、reuters.pyの一部を書き換える必要があるということになるのでしょうか？

[8524ba23]

以下では２日前に対応済みなのでkerasを最新に更新するとよいかと。
https://github.com/keras-team/keras/blob/master/keras/datasets/reuters.py#L56
https://github.com/keras-team/keras/pull/12714

[toshi77]

現在Google colab上で動かしているのでバージョンは最新のものであると思うのですがダメみたいです。

[8524ba23]

colab上のkeras2.2.4にはまだ対応が反映されていないようです。

[toshi77]

なるほど、わかりました。
迅速な回答ありがとうございます！

Answer 1

私も同じ状態でハマりました。
理由はnumpy 1.16.1から1.16.3になる際にallow_pickle=Falseがデフォルトになったためのようです。
https://github.com/keras-team/keras/pull/12714

解消方法は２つあります。

1. numpyのversionを1.16.1に下げる

google colabを使用しているのであれば、下記のコードを実行しnumpyのバージョンを1.16.1に下げることができます。

!pip install numpy==1.16.1

実行すると「RESTART RUNTIME」というボタンが表示されるのでクリックすれば問題は解消されます。

2. Keras 2.2.4 がリリースされるのを待つ

２日前に修正がmasterにcommitされたようです。

https://github.com/keras-team/keras/commit/34231971fa47cb2477b357c1a368978de4128294

次期バージョンのKerasでは解消されているでしょう。

参考

https://github.com/tensorflow/tensorflow/issues/28102
https://github.com/keras-team/keras/pull/12723

https://github.com/numpy/numpy/pull/13359

Comments

[amanoese]

今みたらコメントと同じこと書いてますね。すみません。。。

[toshi77]

具体的な解決方針、参考サイトの提示ありがとうございます！
とりあえずはnumpyのバージョンを下げることによって対処したいと思います。
初心者でもわかりやすく教えてくださりありがとうございましたm(_ _"m)

Answer 2

/usr/local/lib/python3.6/dist-packages/keras/datasets/reuters.py

のreuters.pyを開いて、

56行目の
np.load(path)
を
np.load(path, allow_pickle = True)
に変更してみてください。

Comments

[toshi77]

回答ありがとうございます。
google colabで動かしているのですが、具体的なreuters.pyの開き方がわかりません。
もしよろしければgoogle colab上でのreuters.pyの編集の仕方を教えていただけませんでしょうか。m(__)m