| 講演名 | 2005-06-23 ARTニューラルネットワークによる強化学習のための状態生成器の改良 中村 太亮, 神尾 武司, 三堀 邦彦, 藤坂 尚登, |
|---|---|
| PDFダウンロードページ |  PDFダウンロードページへ |
| 抄録(和) | 強化学習の研究では"探査と知識利用の間のトレードオフ"がしばしば議論される。これは、探査と知識利用が解のクオリティと学習効率の向上にそれぞれ影響するためである。以前、我々が提案したARTニューラルネットワークに基づく適応的な状態空間の分割法は、解のクオリティと学習効率のバランスという観点からも有用な方法である。しかし、探査強度が大きくなり過ぎると学習効率が急激に低下する傾向がある。さらに、適切な探査強度は一般的に不明であるため、これは解決すべき問題であるといえる。そこで本論文では、ARTに2つの学習フェーズを用意することで、探査強度に対して耐性を持つように従来法を改良する。 |
| 抄録(英) | The trade-off between exploration and exploitation has often been discussed in studies on reinforcement learning (RL). This is because exploration and exploitation influence the quality of solutions and the learning efficiency respectively. Previously, we have proposed an adaptive state space segmentation method based on ART neural network for RL. This method is useful for not only the state space segmentation but also the balance between exploration and exploitation. However, if the exploration strength is too large, the learning efficiency degreases rapidly. Since the appropriate strength is generally unknown, this problem must be solved. In this report, we propose a new segmentation method based on ART with two learning phases to improve our conventional method in the tolerance of exploration strength. |
| キーワード(和) | 強化学習 / ARTニューラルネットワーク / 状態空間 / 探査 / 知識利用 |
| キーワード(英) | Reinforcement Learning / ART Neural Network / State Space / Exploration / Exploitation |
| 資料番号 | NLP2005-20 |
| 発行日 |
| 研究会情報 | |
| 研究会 | NLP |
|---|---|
| 開催期間 | 2005/6/16(から1日開催) |
| 開催地（和） | |
| 開催地（英） | |
| テーマ（和） | |
| テーマ（英） | |
| 委員長氏名（和） | |
| 委員長氏名（英） | |
| 副委員長氏名（和） | |
| 副委員長氏名（英） | |
| 幹事氏名（和） | |
| 幹事氏名（英） | |
| 幹事補佐氏名（和） | |
| 幹事補佐氏名（英） | |
| 講演論文情報詳細 | |
| 申込み研究会 | Nonlinear Problems (NLP) |
|---|---|
| 本文の言語 | JPN |
| タイトル（和） | ARTニューラルネットワークによる強化学習のための状態生成器の改良 |
| サブタイトル（和） | |
| タイトル（英） | Improvement of State Generator Based on ART Neural Network for Reinforcement Learning |
| サブタイトル（和） | |
| キーワード(1)（和/英） | 強化学習 / Reinforcement Learning |
| キーワード(2)（和/英） | ARTニューラルネットワーク / ART Neural Network |
| キーワード(3)（和/英） | 状態空間 / State Space |
| キーワード(4)（和/英） | 探査 / Exploration |
| キーワード(5)（和/英） | 知識利用 / Exploitation |
| 第 1 著者 氏名（和/英） | 中村 太亮 / Taisuke Nakamura |
| 第 1 著者 所属（和/英） | 広島市立大学情報科学部 Hiroshima City University |
| 第 2 著者 氏名（和/英） | 神尾 武司 / Takeshi Kamio |
| 第 2 著者 所属（和/英） | 広島市立大学情報科学部 Hiroshima City University |
| 第 3 著者 氏名（和/英） | 三堀 邦彦 / Kunihiko Mitsubori |
| 第 3 著者 所属（和/英） | 海上保安大学校海上安全学講座 Japan Coast Guard Academy |
| 第 4 著者 氏名（和/英） | 藤坂 尚登 / Hisato Fujisaka |
| 第 4 著者 所属（和/英） | 広島市立大学情報科学部 Hiroshima City University |
| 発表年月日 | 2005-06-23 |
| 資料番号 | NLP2005-20 |
| 巻番号（vol） | vol.105 |
| 号番号（no） | 125 |
| ページ範囲 | pp.- |
| ページ数 | 6 |
| 発行日 | |