| 講演名 | 2010-12-21 階層的強化学習を適用したPOMDPによる音声対話制御(一般(ポスターセッション),第12回音声言語シンポジウム:情報アクセス,音声・言語処理一般) 岸本 康秀, 滝口 哲也, 有木 康雄, |
|---|---|
| PDFダウンロードページ |  PDFダウンロードページへ |
| 抄録(和) | 本稿では,不確定な情報に対しても対話を制御させるために,部分観測マルコフ決定過程(POMDP)を用いる.この手法によって,雑音のある状況下等で誤認識が起こった場合でも,自然な対話の中で回復することが可能となる.しかし,POMDPの状態数の増加に伴い,強化学習の計算量が増大するため今まで大きなタスクを扱うことが困難であった.本研究では階層的強化学習を適用することにより,従来のPOMDPよりも大きなタスクを扱うことが可能となった.本稿では,シミュレーション実験を行い,提案手法の有効性を示す. |
| 抄録(英) | In this paper, we propose a dialogue manager using Partially Observable Markov Decision Processes (POMDP) that can treat ambiguous information. It can recover from the recognition error while naturally dialogue. However, a dialogue manager produced with a POMDP has been limited to artificial small tasks because calculation of reinforcement learning becomes complicated as the number of state variables increases. We also propose a variation of the classic POMDP incorporating hierarchical reinforcement learning. It can deal with large task than traditional system. The results show the effectiveness of proposed method. |
| キーワード(和) | 音声対話システム / POMDP / 階層的強化学習 |
| キーワード(英) | spoken dialogue system / Partially Observable Markov Decision Processes / hierarchical reinforcement learning |
| 資料番号 | NLC2010-25,SP2010-98 |
| 発行日 |
| 研究会情報 | |
| 研究会 | SP |
|---|---|
| 開催期間 | 2010/12/13(から1日開催) |
| 開催地（和） | |
| 開催地（英） | |
| テーマ（和） | |
| テーマ（英） | |
| 委員長氏名（和） | |
| 委員長氏名（英） | |
| 副委員長氏名（和） | |
| 副委員長氏名（英） | |
| 幹事氏名（和） | |
| 幹事氏名（英） | |
| 幹事補佐氏名（和） | |
| 幹事補佐氏名（英） | |
| 講演論文情報詳細 | |
| 申込み研究会 | Speech (SP) |
|---|---|
| 本文の言語 | JPN |
| タイトル（和） | 階層的強化学習を適用したPOMDPによる音声対話制御(一般(ポスターセッション),第12回音声言語シンポジウム:情報アクセス,音声・言語処理一般) |
| サブタイトル（和） | |
| タイトル（英） | Spoken Dialogue Manager Using Partially Observable Markov Decision Processes with Hierarchical Reinforcement Learning |
| サブタイトル（和） | |
| キーワード(1)（和/英） | 音声対話システム / spoken dialogue system |
| キーワード(2)（和/英） | POMDP / Partially Observable Markov Decision Processes |
| キーワード(3)（和/英） | 階層的強化学習 / hierarchical reinforcement learning |
| 第 1 著者 氏名（和/英） | 岸本 康秀 / Yasuhide KISHIMOTO |
| 第 1 著者 所属（和/英） | 神戸大学大学院工学研究科 Graduate School of Engineering, Kobe University |
| 第 2 著者 氏名（和/英） | 滝口 哲也 / Tetsuya TAKIGUCHI |
| 第 2 著者 所属（和/英） | 神戸大学自然科学系先端融合研究環 Organization of Advanced Science and Technology, Kobe University |
| 第 3 著者 氏名（和/英） | 有木 康雄 / Yasuo ARIKI |
| 第 3 著者 所属（和/英） | 神戸大学自然科学系先端融合研究環 Organization of Advanced Science and Technology, Kobe University |
| 発表年月日 | 2010-12-21 |
| 資料番号 | NLC2010-25,SP2010-98 |
| 巻番号（vol） | vol.110 |
| 号番号（no） | 357 |
| ページ範囲 | pp.- |
| ページ数 | 6 |
| 発行日 | |