講演抄録/キーワード |
講演名 |
2019-12-19 14:00
モダリティを統合したDNNの認識・単一化複合タスクによる感情の数理的表現 ○原田誠一・佐久間拓人・加藤昇平(名工大) HIP2019-65 |
抄録 |
(和) |
ロボット内で感情を再現するためには,感情コンピューティングの各要素において,感情を計算機内で数理的に表現するモデルが必要と考える.その手法として関連研究の多くは感情を連続値のベクトルで表現し,単一のモダリティによって感情の情報を低次元空間に写像するが,得られる感情の表現はそのモダリティに依存すると考える.本研究では,複数のモダリティを統合した感情の数理的表現(感情空間)を獲得するDNNを提案し,認識タスクと単一化タスクの複合によって,モダリティに依存しない感情空間の獲得を目指す.音声と顔画像データによる実験より,単一のモダリティから獲得される感情空間に相違があることと,提案手法によりモダリティ非依存な感情の情報が獲得可能であることを確かめる. |
(英) |
To emulate human emotions in robots, the mathematical representation of emotion is important for all components of affective computing such as emotion recognition, generation, and expression. There are several methods to represent emotions by vectors of continuous values and mapping them from uni-modality data to low-dimensional space. However, the representation of emotions obtained by uni-modality data seems to depend on such modality. In this study, we proposed integrating multi-modalities on a DNN acquiring mathematical representation (emotional space) of emotion. We aim at the acquisition of emotional space which does not depend on modalities by combining recognition task and unification task. Experiments with audio-visual data have confirmed two things. First, there are differences in the emotional space acquired from a single modality. Second, the proposed method can acquire a modality independent emotional space. |
キーワード |
(和) |
感情コンピューティング / ディープニューラルネットワーク / マルチモーダル / マルチタスク学習 / 距離学習 / 感情空間 / / |
(英) |
Affective Computing / Deep Neural Networks / Multi-modal / Multi-task Learning / Metric Learning / Emotional Space / / |
文献情報 |
信学技報, vol. 119, no. 348, HIP2019-65, pp. 1-6, 2019年12月. |
資料番号 |
HIP2019-65 |
発行日 |
2019-12-12 (HIP) |
ISSN |
Print edition: ISSN 0913-5685 Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
PDFダウンロード |
HIP2019-65 |