講演名 2002/3/1
擬人化音声対話エージェントにおける発話時の頭部挙動モデル
松下 善則, 川本 真一, 中井 満, 下平 博, 嵯峨山 茂樹,
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 擬人化音声対話エージェントシステムにおいて,エージェントの発話音声に合わせて頭部画像の動きを制御する手法について述べる.エージェントの口形状を音声に同期させて動かすリップシンクの研究は従来から行われているが,頭部全体を自然に動かす研究は殆んど無かった.本報告では,モーションキャプチャによる実測データを基に,発話音声から得られる特徴量と頭部の動きの関係をニューラルネットワークによって学習し,任意の音声発話に対して頭部挙動画像を同期して自動合成する手法を提案する.主観評価実験によって提案法の有効性を論じる.
抄録(英) A novel method of synchronously synthesizing the head motion of an anthropomorphic spoken dialog agent with its utterance is proposed. Although much efforts have been taken to synchronize the lip motion with utterance, very few research exist for such head-motion control. A neural network is employed to learn the relationship between the acoustic features of the utterance and the head motion that are measured by a motion-capturing system. The proposed method enables to simulate the facial animation automatically that moves synchronously with any given utterances. Subjective evaluation of the performance of the method is reported as well.
キーワード(和) 頭部の動き / 発話動作 / 音声対話エージェント / ニューラルネットワーク
キーワード(英) head motion / facial animation / utterance / neural network
資料番号 HIP2001-98
発行日

研究会情報
研究会 HIP
開催期間 2002/3/1(から1日開催)
開催地(和)
開催地(英)
テーマ(和)
テーマ(英)
委員長氏名(和)
委員長氏名(英)
副委員長氏名(和)
副委員長氏名(英)
幹事氏名(和)
幹事氏名(英)
幹事補佐氏名(和)
幹事補佐氏名(英)

講演論文情報詳細
申込み研究会 Human Information Processing (HIP)
本文の言語 JPN
タイトル(和) 擬人化音声対話エージェントにおける発話時の頭部挙動モデル
サブタイトル(和)
タイトル(英) A Head-Behavior Synchronization Model with Utterance for Anthropomorphic Spoken-Dialog Agent
サブタイトル(和)
キーワード(1)(和/英) 頭部の動き / head motion
キーワード(2)(和/英) 発話動作 / facial animation
キーワード(3)(和/英) 音声対話エージェント / utterance
キーワード(4)(和/英) ニューラルネットワーク / neural network
第 1 著者 氏名(和/英) 松下 善則 / Yoshinori MATSUSHITA
第 1 著者 所属(和/英) 北陸先端科学技術大学院大学情報科学研究科
School of Information Science, Japan Advanced Institute of Science and Technology
第 2 著者 氏名(和/英) 川本 真一 / Shinnichi KAWAMOTO
第 2 著者 所属(和/英) 北陸先端科学技術大学院大学情報科学研究科
School of Information Science, Japan Advanced Institute of Science and Technology
第 3 著者 氏名(和/英) 中井 満 / Mitsuru NAKAI
第 3 著者 所属(和/英) 北陸先端科学技術大学院大学情報科学研究科
School of Information Science, Japan Advanced Institute of Science and Technology
第 4 著者 氏名(和/英) 下平 博 / Hiroshi SHIMODAIRA
第 4 著者 所属(和/英) 北陸先端科学技術大学院大学情報科学研究科
School of Information Science, Japan Advanced Institute of Science and Technology
第 5 著者 氏名(和/英) 嵯峨山 茂樹 / Shigeki SAGAYAMA
第 5 著者 所属(和/英) 東京大学大学院情報理工学系研究科:北陸先端科学技術大学院大学情報科学研究科
Graduate School of Information Science and Technology, University of Tokyo:School of Information Science, Japan Advanced Institute of Science and Technology
発表年月日 2002/3/1
資料番号 HIP2001-98
巻番号(vol) vol.101
号番号(no) 699
ページ範囲 pp.-
ページ数 8
発行日