| 講演名 | 2004/11/11 顔画像処理による対話型コミュニケーションの研究 : 相互部分空間法による認識方式の改良(顔・ジェスチャ認識のためのパターン認識メディア理解,一般) 西 奈津子, 渡邊 睦, |
|---|---|
| PDFダウンロードページ | PDFダウンロードページへ |
| 抄録(和) | 会話や細かい文字の判別が困難,また,手指によるキー操作が困難な障害者・高齢者との自由自在なコミュニケーションを支援するために,利用者の顔表情や動作を認識することによる意思伝達システムの研究開発を行っている.本報告では,利用者の前に設置したカメラ画像から4種類の口部形状を認識することにより,階層化された日常会話を順次選択し,相当する会話文を合成音声により出力するシステムのプロトタイプ開発の結果について報告する.利用者による口部パターンの認識は画像の明度分布を相互部分空間法を用いて解析することにより行い,選択結果の確認は口部の開閉動作を明度分布の時間変化として検出することにより行う.20人による口部パターンの認識実験により,この方式の有効性を確認した. |
| 抄録(英) | The authors are developing a vision-based intension transfer system by recognizing user's face expressions and movements, to help free and convenient communications with aged or disabled persons who find difficulties in talking, discriminating small character prints and operating keyboards by hands and fingers. In this paper, introduces a prototype system, where layered daily conversations are successively selected by recognizing the transition in shape of user's mouth part using camera image settled in front of the user and correspondent synthetic speech is automatically broadcasted. The four mouth patterns are automatically recognized by using the mutual subspace method by analyzing the intensity histogram data around the mouth part region. The confirmation of selection result by the user is executed by detecting the open and shut movements of mouth though the temporal change in intensity histogram data. Experimental results of mouth pattern recognition by twenty persons have shown the effectiveness of the proposed method. |
| キーワード(和) | ヒューマンインタフェース / マルチモーダル対話 / 口部パターン認識 / 明度ヒストグラム解析 / 相互部分空間法 / コンピュータビジョン |
| キーワード(英) | Human Interface / Multi-modal Conversation / Mouth Part Pattern Recognition / Intensity Histogram Analysis / Mutual Subspace Method / Computer Vision |
| 資料番号 | PRMU2004-100,HIP2004-40 |
| 発行日 |
| 研究会情報 | |
| 研究会 | PRMU |
|---|---|
| 開催期間 | 2004/11/11(から1日開催) |
| 開催地（和） | |
| 開催地（英） | |
| テーマ（和） | |
| テーマ（英） | |
| 委員長氏名（和） | |
| 委員長氏名（英） | |
| 副委員長氏名（和） | |
| 副委員長氏名（英） | |
| 幹事氏名（和） | |
| 幹事氏名（英） | |
| 幹事補佐氏名（和） | |
| 幹事補佐氏名（英） | |
| 講演論文情報詳細 | |
| 申込み研究会 | Pattern Recognition and Media Understanding (PRMU) |
|---|---|
| 本文の言語 | JPN |
| タイトル（和） | 顔画像処理による対話型コミュニケーションの研究 : 相互部分空間法による認識方式の改良(顔・ジェスチャ認識のためのパターン認識メディア理解,一般) |
| サブタイトル（和） | |
| タイトル（英） | Research of dialog-based communication based on facial image processing : Improvement of recognition algorithm by using mutual subspace method |
| サブタイトル（和） | |
| キーワード(1)（和/英） | ヒューマンインタフェース / Human Interface |
| キーワード(2)（和/英） | マルチモーダル対話 / Multi-modal Conversation |
| キーワード(3)（和/英） | 口部パターン認識 / Mouth Part Pattern Recognition |
| キーワード(4)（和/英） | 明度ヒストグラム解析 / Intensity Histogram Analysis |
| キーワード(5)（和/英） | 相互部分空間法 / Mutual Subspace Method |
| キーワード(6)（和/英） | コンピュータビジョン / Computer Vision |
| 第 1 著者 氏名（和/英） | 西 奈津子 / Natsuko Nishi |
| 第 1 著者 所属（和/英） | 鹿児島大学大学院理工学研究科 Graduate School of Science and Engineering, Kagoshima University |
| 第 2 著者 氏名（和/英） | 渡邊 睦 / Mutsumi Watanabe |
| 第 2 著者 所属（和/英） | 鹿児島大学大学院理工学研究科 Graduate School of Science and Engineering, Kagoshima University |
| 発表年月日 | 2004/11/11 |
| 資料番号 | PRMU2004-100,HIP2004-40 |
| 巻番号（vol） | vol.104 |
| 号番号（no） | 447 |
| ページ範囲 | pp.- |
| ページ数 | 6 |
| 発行日 | |