| 講演抄録／キーワード |
| 講演名 |
2006-02-24 17:00
事例を経験として蓄積し利用する強化学習手法の提案
○小幡琢磨・佐々木洋輔（東京工科大）・久保村千明（山野美容芸術短大）・亀田弘之（東京工科大） |
| 抄録 |
（和） |
教師を必要とせずにエージェントを環境に適応させる枠組みとして強化学習がある．
強化学習ではエージェントが環境に対して試行錯誤を繰り返すことにより，それぞれの状況に適した行動を学習することができる．
試行はエージェントに実装されている行動の種類と状況の数によっては大量におこなうこととなる．
現実的な環境を想定した場合にはこれらの数は増加してしまい，結果として学習が収束するまでには学習に反映されない大量の無駄な試行が存在することとなる．
これらの無駄な試行には学習に有効に利用できる試行が存在すると考えられる．
また状況間の類似を考慮することで，無駄な試行を減らすことが可能と考えられる．
本研究ではこれらの無駄な試行に着目し, 無駄な試行を経験として蓄積し，有効に利用することで学習速度を向上させることを目指した．
具体的には，学習の過程における試行のなかで無駄な試行を学習に反映させる手法と，
経験を蓄積することにより，類似した状況下で効率的に行動選択することのできる手法を提案する． |
| （英） |
Reinforcement learning is a learning frame for machines to adapt themselves to environment with no teachers.
With reinforcement learning methods, agents can learn to behave adapting to environment by trial and error.
Many times of trials are inevitably made, when the number of actions of agents and that of kinds of situations are very large.
In real world, the number of them would be much increased.
Many trials would be also made in vain, while learning procedure converges, in spite that some of them could be effectively applied to learn.
Moreover, similarity among situations can be possibly used to increase waste trials.
In this paper, we focused on these waste trials, i.e., negative examples, so that agents can learn to reach goals more rapidly by accumulating and using them as experience.
Concretely, we propose a method to reuse negative examples in learning process, and also another method for agents to take effective action in similar situations with accumulation and use of examples as experience. |
| キーワード |
（和） |
強化学習 / 経験 / 状況 / 類似性 / エージェント / / / |
| （英） |
reinfocement learning / experience / situation / similarity / agent / / / |
| 文献情報 |
信学技報, vol. 105, no. 613, TL2005-97, pp. 177-181, 2006年2月. |
| 資料番号 |
TL2005-97 |
| 発行日 |
2006-02-17 (TL, PRMU) |
| ISSN |
Print edition: ISSN 0913-5685 |
| PDFダウンロード |
|
|