質問するログイン新規登録

質問編集履歴

1

追記

2018/03/15 06:17

投稿

Hayato1201
Hayato1201

スコア232

title CHANGED
File without changes
body CHANGED
@@ -14,4 +14,13 @@
14
14
  0. Action spaceからactionを選ぶ時に、状況によって選べないという設定ができるか
15
15
  0. いくつかのActionをした後にそれらの行動にまとめて報酬を与えることは可能か
16
16
 
17
- という事です!長々と申し訳ありませんがよろしくお願いいたします。
17
+ という事です!長々と申し訳ありませんがよろしくお願いいたします。
18
+
19
+
20
+ ーーーーーーーーーーーーーーーーーーーーーーーーーーーーーーーーー
21
+ 追記です。
22
+
23
+ クラスを自作というのはどこのクラスを作り変えれば良いのでしょうか?また、step関数での実装というと、
24
+ 例えば、stepにアクションとして5が選ばれ、5が空だったとします。そうしたら空では無い箱か「何もしない」を選ばせるまでstep内でactionを変化させるということでしょうか?しかしそうするとAgentとしては5を選んでいるのに実際は違うアクションを選んでいることになり、学習がうまくいかない気がします。
25
+ また、二つ目の質問に対してですが、step内で「箱Aが満杯になる」、もしくは、「何もしない」が選ばれるまで、報酬としてreturnされるのは0として、実際の値は保存しておき、以上二つの条件に当てはまった時そのまで保存されていた報酬の合計をreturnする様にするという事ですか?
26
+ 実はある論文の実装をしたいのですが、それの記述だと「箱Aが満杯になる」、もしくは、「何もしない」が選ばれるとそこまでで一つのタイムステップとなると書かれていました。以上の様に行うとreturnしている値は同じでも無駄にステップ数を稼いでしまいます。これは問題になりますかね・・・?