講演抄録/キーワード |
講演名 |
2015-03-16 14:45
カオスニューラルネットを用いた内部ダイナミクス由来の探索に基づく強化学習 ○柴田克成・坂下悠太(大分大) MBE2014-166 NC2014-117 |
抄録 |
(和) |
本稿ではまず,自律学習による知能創発における基本的なコンセプトとして,“強化学習で必須の「探索」 は学習者内部のダイナミクスの一側面であり,学習とともに「思考」のような合目的でダイナミックな高次機能へと 発展する” という新たな考え方を導入する。そして,動作生成をカオスニューラルネットで行って,外部からの乱数 の付加なしで内部ダイナミクスに基づいて探索を行うことで,「カオス的遍歴」のようなダイナミクスに基づいた効果 的な探索と,それが発展することで安定と遷移の両立が必要なダイナミックな高次機能の学習が期待される。さらに, 探索成分を分離できない本手法において,状態価値の TD(Temporal Difference) 誤差と各ニューロンの時間変化との 相関に注目した新たな強化学習法を提案し,ゴール到達行動の学習ができることを簡単なタスクで示した。 |
(英) |
As a basic concept for emergence of intelligence through autonomous learning, exploration that is es- sential in reinforcement learning is considered as one aspect of the learner’s internal dynamics, which is expected to develop through learning towards purposive and dynamic higher functions such as ‘thinking’. A chaotic neural network is used to generate motions that include exploratory factors based on the chaotic dynamics without adding external random noises. Effective exploration is expected based on the dynamics such as “chaotic itinerancy”, which is also the key to learn dynamic higher functions more easily that needs both stable and transitive dynamics. Fur- thermore, a reinforcement learning method without external random noises by focusing on the correlation between the TD (Temporal Difference) error of the state value and the output change of each neuron is newly proposed. It was confirmed that an agent learned goal-directed behaviors in a simple task. |
キーワード |
(和) |
カオスニューラルネット / 探索 / 強化学習 / ダイナミクス / 思考 / / / |
(英) |
chaotic neural network / exploration / reinforcement learning / dynamics / thinking / / / |
文献情報 |
信学技報, vol. 114, no. 515, NC2014-117, pp. 277-282, 2015年3月. |
資料番号 |
NC2014-117 |
発行日 |
2015-03-09 (MBE, NC) |
ISSN |
Print edition: ISSN 0913-5685 Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
PDFダウンロード |
MBE2014-166 NC2014-117 |
研究会情報 |
研究会 |
NC MBE |
開催期間 |
2015-03-16 - 2015-03-17 |
開催地(和) |
玉川大学 |
開催地(英) |
Tamagawa University |
テーマ(和) |
ME,一般 |
テーマ(英) |
ME, etc |
講演論文情報の詳細 |
申込み研究会 |
NC |
会議コード |
2015-03-NC-MBE |
本文の言語 |
日本語 |
タイトル(和) |
カオスニューラルネットを用いた内部ダイナミクス由来の探索に基づく強化学習 |
サブタイトル(和) |
|
タイトル(英) |
Reinforcement Learning based on Internal-Dynamics-Derived Exploration Using a Chaotic Neural Network |
サブタイトル(英) |
|
キーワード(1)(和/英) |
カオスニューラルネット / chaotic neural network |
キーワード(2)(和/英) |
探索 / exploration |
キーワード(3)(和/英) |
強化学習 / reinforcement learning |
キーワード(4)(和/英) |
ダイナミクス / dynamics |
キーワード(5)(和/英) |
思考 / thinking |
キーワード(6)(和/英) |
/ |
キーワード(7)(和/英) |
/ |
キーワード(8)(和/英) |
/ |
第1著者 氏名(和/英/ヨミ) |
柴田 克成 / Katsunari Shibata / シバタ カツナリ |
第1著者 所属(和/英) |
大分大学 (略称: 大分大)
Oita University (略称: Oita Univ.) |
第2著者 氏名(和/英/ヨミ) |
坂下 悠太 / Yuta Sakashita / サカシタ ユウタ |
第2著者 所属(和/英) |
大分大学 (略称: 大分大)
Oita University (略称: Oita Univ.) |
第3著者 氏名(和/英/ヨミ) |
/ / |
第3著者 所属(和/英) |
(略称: )
(略称: ) |
第4著者 氏名(和/英/ヨミ) |
/ / |
第4著者 所属(和/英) |
(略称: )
(略称: ) |
第5著者 氏名(和/英/ヨミ) |
/ / |
第5著者 所属(和/英) |
(略称: )
(略称: ) |
第6著者 氏名(和/英/ヨミ) |
/ / |
第6著者 所属(和/英) |
(略称: )
(略称: ) |
第7著者 氏名(和/英/ヨミ) |
/ / |
第7著者 所属(和/英) |
(略称: )
(略称: ) |
第8著者 氏名(和/英/ヨミ) |
/ / |
第8著者 所属(和/英) |
(略称: )
(略称: ) |
第9著者 氏名(和/英/ヨミ) |
/ / |
第9著者 所属(和/英) |
(略称: )
(略称: ) |
第10著者 氏名(和/英/ヨミ) |
/ / |
第10著者 所属(和/英) |
(略称: )
(略称: ) |
第11著者 氏名(和/英/ヨミ) |
/ / |
第11著者 所属(和/英) |
(略称: )
(略称: ) |
第12著者 氏名(和/英/ヨミ) |
/ / |
第12著者 所属(和/英) |
(略称: )
(略称: ) |
第13著者 氏名(和/英/ヨミ) |
/ / |
第13著者 所属(和/英) |
(略称: )
(略称: ) |
第14著者 氏名(和/英/ヨミ) |
/ / |
第14著者 所属(和/英) |
(略称: )
(略称: ) |
第15著者 氏名(和/英/ヨミ) |
/ / |
第15著者 所属(和/英) |
(略称: )
(略称: ) |
第16著者 氏名(和/英/ヨミ) |
/ / |
第16著者 所属(和/英) |
(略称: )
(略称: ) |
第17著者 氏名(和/英/ヨミ) |
/ / |
第17著者 所属(和/英) |
(略称: )
(略称: ) |
第18著者 氏名(和/英/ヨミ) |
/ / |
第18著者 所属(和/英) |
(略称: )
(略称: ) |
第19著者 氏名(和/英/ヨミ) |
/ / |
第19著者 所属(和/英) |
(略称: )
(略称: ) |
第20著者 氏名(和/英/ヨミ) |
/ / |
第20著者 所属(和/英) |
(略称: )
(略称: ) |
講演者 |
第1著者 |
発表日時 |
2015-03-16 14:45:00 |
発表時間 |
25分 |
申込先研究会 |
NC |
資料番号 |
MBE2014-166, NC2014-117 |
巻番号(vol) |
vol.114 |
号番号(no) |
no.514(MBE), no.515(NC) |
ページ範囲 |
pp.277-282 |
ページ数 |
6 |
発行日 |
2015-03-09 (MBE, NC) |
|