講演抄録/キーワード |
講演名 |
2011-03-07 16:25
Fusing Learning Strategies to Learn Various Tasks with Single Configuration ○Akihiko Yamaguchi・Jun Takamatsu・Tsukasa Ogasawara(NAIST) NC2010-154 |
抄録 |
(和) |
本論文では,強化学習の枠組で学習戦略を融合する手法を提案する.一般に,各タスクそれぞれに対して適切な学習戦略を選択する必要がある.これに対し,提案手法では学習戦略を融合することにより,この選択を自動化する.本論文で融合される学習戦略は,転移学習,階層型強化学習,モデルベース強化学習を含む.提案手法は,幅広い応用範囲を持つ.提案手法を匍匐などの運動学習タスクに適用する場合,動作のパフォーマンスは単一の学習戦略を用いる場合と比べて改善される.提案手法では,匍匐や旋回などの既に学習された動作を階層的に統合し,ナビゲーションタスクに適用することも可能である.本論文では,ヒューマノイドロボットの迷路タスクへ適用した結果を示す.このタスクでは,ゴールまでのパスだけでなく,ほふくや旋回も学習される. |
(英) |
This paper proposes a method to fuse learning strategies (LSs) in reinforcement learning framework. Generally, we need to choose a suitable LS for each task respectively. In contrast, the proposed method automates this selection by fusing LSs. The LSs fused in this paper includes a transfer learning, a hierarchical RL, and a model based RL. The proposed method has a wide applicability. When the method is applied to a motion learning task, such as a crawling task, the performance of motion may be improved compared to an agent with a single LS. The method also can be applied to a navigation task by hierarchically combining already learned motions, such as a crawling and a turning. This paper demonstrates a maze task of a humanoid robot where the robot learns not only a path to goal, but also a crawling and a turning motions. |
キーワード |
(和) |
学習システム / 強化学習 / モジュール化 / 運動学習 / ヒューマノイドロボット / / / |
(英) |
Learning System / Reinforcement Learning / Modularization / Motion Learning / Humanoid Robot / / / |
文献情報 |
信学技報, vol. 110, no. 461, NC2010-154, pp. 159-164, 2011年3月. |
資料番号 |
NC2010-154 |
発行日 |
2011-02-28 (NC) |
ISSN |
Print edition: ISSN 0913-5685 Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
PDFダウンロード |
NC2010-154 |