| 講演名 | 2001/7/11 発話表情の自動生成 木村 成宏, 佐藤 省三, 梅崎 太造, |
|---|---|
| PDFダウンロードページ | PDFダウンロードページへ |
| 抄録(和) | 本稿では、計算量が少なく複雑なルール設定を必要としないコホーネン型ニューラルネットワーク(KNN)による発話表情合成法を提案し、音声との同期について検証を行った。本手法は、KNNにより母音発話時及び非発話時の静止画像計6枚から母音から母音への表情系列を生成する。表情変化区間及び表情安定区間の判定は音声のパワー値により行い、表情安定区間を一定の表情に固定し、表情変化区間に生成された表情系列の割り当てを行うことにより、発話表情と音声を同期させる。評価実験では、発話表情を各音節間で等間隔に割り当てる合成法と、本稿で提案した合成法を合成画像と実画像とのフレーム誤差により比較した結果、提案手法による合成発話表情の方がより実際の発話表情に近いことを確認した。 |
| 抄録(英) | In this paper, we proposed a facial expression synthesis method in speech using the Kohonen neural network(KNN) and investigate quantitatively synchronization of generated facial expression series with real speech sounds. The basis of this method is to utilize facial expression series in speech of vowel to vowel generated from the still images in speech of 5 vowels and non-speech by KNN. In synchronization with speech sound, the stabile section and the changing section of facial expression are detected by the power of speech, and a fixed facial expression image is allocated in the stabile section and facial expression series is placed with the same time interval in the changing section. In the evaluation experiment, two different synchronizing methods are compared. As this result, it is confirmed that the proposed method can represent more real face expression than the other method. |
| キーワード(和) | コホーネン型ニューラルネットワーク / 発話表情 / 母音系列 / 音声との同期 |
| キーワード(英) | Kohonen neural network model / facial expression / facial expression series in speech of vowel / synchronization with speech sound |
| 資料番号 | IE2001-19,PRMU2001-39,MVE2001-18 |
| 発行日 |
| 研究会情報 | |
| 研究会 | MVE |
|---|---|
| 開催期間 | 2001/7/11(から1日開催) |
| 開催地（和） | |
| 開催地（英） | |
| テーマ（和） | |
| テーマ（英） | |
| 委員長氏名（和） | |
| 委員長氏名（英） | |
| 副委員長氏名（和） | |
| 副委員長氏名（英） | |
| 幹事氏名（和） | |
| 幹事氏名（英） | |
| 幹事補佐氏名（和） | |
| 幹事補佐氏名（英） | |
| 講演論文情報詳細 | |
| 申込み研究会 | Media Experience and Virtual Environment (MVE) |
|---|---|
| 本文の言語 | JPN |
| タイトル（和） | 発話表情の自動生成 |
| サブタイトル（和） | |
| タイトル（英） | Automatic Synthesis of Facial Expression in Speech |
| サブタイトル（和） | |
| キーワード(1)（和/英） | コホーネン型ニューラルネットワーク / Kohonen neural network model |
| キーワード(2)（和/英） | 発話表情 / facial expression |
| キーワード(3)（和/英） | 母音系列 / facial expression series in speech of vowel |
| キーワード(4)（和/英） | 音声との同期 / synchronization with speech sound |
| 第 1 著者 氏名（和/英） | 木村 成宏 / Naruhiro KIMURA |
| 第 1 著者 所属（和/英） | 中部大学工学部 Faculty of Engineering, Chubu University |
| 第 2 著者 氏名（和/英） | 佐藤 省三 / Shozo SATO |
| 第 2 著者 所属（和/英） | 日本福祉大学ビジネス&エンジニアリング研究センター Business and Engineering Research Center, Nihon Fukushi University |
| 第 3 著者 氏名（和/英） | 梅崎 太造 / Taizo UMEZAKI |
| 第 3 著者 所属（和/英） | 中部大学工学部 Faculty of Engineering, Chubu University |
| 発表年月日 | 2001/7/11 |
| 資料番号 | IE2001-19,PRMU2001-39,MVE2001-18 |
| 巻番号（vol） | vol.101 |
| 号番号（no） | 204 |
| ページ範囲 | pp.- |
| ページ数 | 8 |
| 発行日 | |