| 講演名 | 2008-09-06 複数口唇領域を利用した多言語に有効な単語読唇(テーマセッション,手,顔,身体表現の認識,理解) 齊藤 剛史, 森下 和敏, 小西 亮介, |
|---|---|
| PDFダウンロードページ |  PDFダウンロードページへ |
| 抄録(和) | これまで読唇に関する研究では,特定の言語を対象とする報告がほとんどであり,言語と読唇手法に関する言及はない.さらに従来手法の多くは唇の外側輪郭領域あるいは口内領域を用いており,歯や舌の情報が特徴量に反映されていない.本論文では,多言語に対して有効な読唇手法について言及する.まず,Active Appeamnce Modelを適用し,唇の外側と内側の輪郭を同時に抽出する.次に歯領域と口内領域を抽出する.従来提案されている様々な特徴量を計測して比較実験を行う.本論文では4ヵ国語を対象とし,各言語において20単語の発話シーンを撮影して認識実験を行った.その結果,内側唇輪郭の面積とアスペクト比と口内領域の面積の3形状に基づくトラジェクトリ特徴量が,従来手法やその他の領域を用いた場合よりも高い認識率93.6%を得ることを確認した. |
| 抄録(英) | The traditional researches targeted at only one language, and there is no research to refer the language and recognition method. Moreover, a lot of model-based methods use only an external lip or intraoral region, and tooth or tongue region is not reflected to the feature. This paper describes analysis of efficient lip reading method for various languages. First, we applies Active Appearance Model, and simultaneously extracts the external and internal lip contour. Then, the tooth and intraoral regions are detected. Various features from five regions are fed to the recognition process. We set four languages to be the recognition target, and recorded twenty words per each language. As the result, proposed trajectory feature based on three shape features, the area and aspect ratio of internal lip region, and area of intraoral region, was obtained the highest recognition rates of 93.6%, compared with the traditional methods and other regions. |
| キーワード(和) | 読唇 / 単語認識 / 日本語 / 中国語 / モンゴル語 / ネパール語 |
| キーワード(英) | lip reading / word recognition / Japanese / Chinese / Mongolian / Nepalese |
| 資料番号 | PRMU2008-76,HIP2008-76 |
| 発行日 |
| 研究会情報 | |
| 研究会 | PRMU |
|---|---|
| 開催期間 | 2008/8/29(から1日開催) |
| 開催地（和） | |
| 開催地（英） | |
| テーマ（和） | |
| テーマ（英） | |
| 委員長氏名（和） | |
| 委員長氏名（英） | |
| 副委員長氏名（和） | |
| 副委員長氏名（英） | |
| 幹事氏名（和） | |
| 幹事氏名（英） | |
| 幹事補佐氏名（和） | |
| 幹事補佐氏名（英） | |
| 講演論文情報詳細 | |
| 申込み研究会 | Pattern Recognition and Media Understanding (PRMU) |
|---|---|
| 本文の言語 | JPN |
| タイトル（和） | 複数口唇領域を利用した多言語に有効な単語読唇(テーマセッション,手,顔,身体表現の認識,理解) |
| サブタイトル（和） | |
| タイトル（英） | Efficient Lip Reading Method to Various Languages using Multiple Lip Regions |
| サブタイトル（和） | |
| キーワード(1)（和/英） | 読唇 / lip reading |
| キーワード(2)（和/英） | 単語認識 / word recognition |
| キーワード(3)（和/英） | 日本語 / Japanese |
| キーワード(4)（和/英） | 中国語 / Chinese |
| キーワード(5)（和/英） | モンゴル語 / Mongolian |
| キーワード(6)（和/英） | ネパール語 / Nepalese |
| 第 1 著者 氏名（和/英） | 齊藤 剛史 / Takeshi SAITOH |
| 第 1 著者 所属（和/英） | 鳥取大学大学院工学研究科 Tottori University |
| 第 2 著者 氏名（和/英） | 森下 和敏 / Kazutoshi MORISHITA |
| 第 2 著者 所属（和/英） | 鳥取大学大学院工学研究科 Tottori University |
| 第 3 著者 氏名（和/英） | 小西 亮介 / Ryosuke KONISHI |
| 第 3 著者 所属（和/英） | 鳥取大学大学院工学研究科 Tottori University |
| 発表年月日 | 2008-09-06 |
| 資料番号 | PRMU2008-76,HIP2008-76 |
| 巻番号（vol） | vol.108 |
| 号番号（no） | 198 |
| ページ範囲 | pp.- |
| ページ数 | 6 |
| 発行日 | |