Q&A
> 他のサイトも参考にしつつ、モジュールについてはインストールの確認を行なった。
参考にしたサイトとバージョンは合わせていますでしょうか？
前提・実現したいこと
ここに質問の内容を詳しく書いてください。
https://qiita.com/tanuk1647/items/7b8c2f0d09330cbfacd2
上記のサイトを参考に、強化学習を学習しようとしていたのですが、最初から躓いてしまい、困っております。エラーの意味と対処法について伺いたいです。
発生している問題・エラーメッセージ
--------------------------------------------------------------------------- TypeError Traceback (most recent call last) <ipython-input-11-c7ea9d334d3c> in <module> ----> 1 d = DQNJankenGlico(strategy=Strategy.RANDOM, recycle=True) 2 h = d.test(nb_episodes=1, verbose=1, visualize=True) 3 visualize_positions(d.env) 4 visualize_hands(d.env) <ipython-input-7-5f2addb0abfc> in __init__(self, strategy, recycle) 399 memory = SequentialMemory(limit=50000, window_length=1) 400 policy = BoltzmannQPolicy(tau=1.) --> 401 self.dqn = DQNAgent(model=self.model,nb_actions=self.nb_actions,memory=memory,nb_steps_warmup=1000,target_model_update=1e-2,policy=policy) 402 self.dqn.compile(Adam(lr=1e-3), metrics=[]) 403 ~/opt/anaconda3/lib/python3.8/site-packages/rl/agents/dqn.py in __init__(self, model, policy, test_policy, enable_double_dqn, enable_dueling_network, dueling_type, *args, **kwargs) 106 107 # Validate (important) input. --> 108 if hasattr(model.output, '__len__') and len(model.output) > 1: 109 raise ValueError('Model "{}" has more than one output. DQN expects a model that has a single output.'.format(model)) 110 if model.output._keras_shape != (None, self.nb_actions): ~/opt/anaconda3/lib/python3.8/site-packages/keras/engine/keras_tensor.py in __len__(self) 209 210 def __len__(self): --> 211 raise TypeError('Keras symbolic inputs/outputs do not ' 212 'implement `__len__`. You may be ' 213 'trying to pass Keras symbolic inputs/outputs ' TypeError: Keras symbolic inputs/outputs do not implement `__len__`. You may be trying to pass Keras symbolic inputs/outputs to a TF API that does not register dispatching, preventing Keras from automatically converting the API call to a lambda layer in the Functional Model. This error will also get raised if you try asserting a symbolic input/output directly. ### 該当コード 上記サイトのモジュールのインポートが記載されているコードについてはエラーなし。 その直後の、一回戦についての下記のコードでエラーが発生。
d = DQNJankenGlico(strategy=Strategy.RANDOM, recycle=True)
h = d.test(nb_episodes=1, verbose=1, visualize=True)
visualize_positions(d.env)
visualize_hands(d.env)
### 試したこと 他のサイトも参考にしつつ、モジュールについてはインストールの確認を行なった。 ### 補足情報（FW/ツールのバージョンなど） 初めての質問ですので、説明がわかりづらい点があるかと思われますが、ご教授いただけると幸いです。
ご回答ありがとうございます
元の参考にしたサイトにバージョンについての説明が記載されていないようなのですが、この場合はどうしようもないのでしょうか？
そうなんですね。Kerasなどはバージョン違いで動かないことがよくあるようです。バージョン下げると上手く行くかもしれません。（1.
系の最終バージョンかもしれませんね）確認はしていないので違っていたらすみません。
ありがとうございます。
色々試してみたところ、エラーの内容が変わりました。
これについても、お教えいただきたいです。
---------------------------------------------------------------------------
TypeError Traceback (most recent call last)
<ipython-input-4-c7ea9d334d3c> in <module>
----> 1 d = DQNJankenGlico(strategy=Strategy.RANDOM, recycle=True)
2 h = d.test(nb_episodes=1, verbose=1, visualize=True)
3 visualize_positions(d.env)
4 visualize_hands(d.env)
<ipython-input-2-9ad0d6d9a6a0> in __init__(self, strategy, recycle)
400 self.dqn = DQNAgent(model=self.model, nb_actions=self.nb_actions, memory=memory,
401 nb_steps_warmup=1000, target_model_update=1e-2, policy=policy)
--> 402 self.dqn.compile(Adam(lr=1e-3), metrics=[])
403
404 self.__istrained = False
~/opt/anaconda3/envs/janken/lib/python3.6/site-packages/rl/agents/dqn.py in compile(self, optimizer, metrics)
194 loss_out = Lambda(clipped_masked_error, output_shape=(1,), name='loss')([y_true, y_pred, mask])
195 ins = [self.model.input] if type(self.model.input) is not list else self.model.input
--> 196 trainable_model = Model(inputs=ins + [y_true, mask], outputs=[loss_out, y_pred])
197 assert len(trainable_model.output_names) == 2
198 combined_metrics = {trainable_model.output_names[1]: metrics}
TypeError: __init__() got an unexpected keyword argument 'inputs'
あなたの回答
tips
プレビュー
