講演名 2003/11/14
顔画像処理による対話型コミュニケーションの研究(顔とジェスチャの認識)
西 奈津子, 渡邊 睦,
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 会話や細かい文字の判別が困難,また,手指によるキー操作が困難な障害者・高齢者との自由自在なコミュニケーションを支援するために,利用者の顔表情や動作を認識することによる意思伝達システムの研究開発を行っている.本報告では,利用者の前に設置したカメラ画像から口部形状の変化を認識することにより,階層化された日常会話を順次選択し,口部領域周辺の明度分布を解析することによって4種類の口部パターンの自動認識を行うシステムのプロトタイプ開発の結果について報告する.選択結果の確認は口部の開閉動作を明度分布の時間変化として検出することにより行う.25人による口部パターンの認識実験により、この方式の有効性を確認した.
抄録(英) The authors are developing a vision-based intension transfer technique by recognizing user's face expressions and movements, to help free and convenient communications with aged or disabled persons who find difficulties in talking, discriminating small character prints and operating keyboards by hands and fingers. In this paper, we report a prototype system, where layered daily conversations are successively selected by recognizing the transition in shape of user's mouth part using camera image sequences settled in front of the user. A method which automatically recognizes these four patterns by analyzing the intensity histogram data around the mouth part region is newly developed. The confirmation of a selection on the way is executed by detecting the open and shut movements of mouth though the temporal change in intensity histogram data. Experimental results of mouth part shape pattern recognition by twenty-five persons have shown the effectiveness of the method.
キーワード(和) ヒューマンインタフェース / マルチモーダル対話 / 口部パターン認識 / 明度ヒストグラム解析 / コンピュータビジョン
キーワード(英) Human Interface / Multi-modal Conversation / Mouth Part Pattern Recognition / Intensity Histogram Analysis / Computer Vision
資料番号 PRMU2003-160,HIP2003-66
発行日

研究会情報
研究会 PRMU
開催期間 2003/11/14(から1日開催)
開催地(和)
開催地(英)
テーマ(和)
テーマ(英)
委員長氏名(和)
委員長氏名(英)
副委員長氏名(和)
副委員長氏名(英)
幹事氏名(和)
幹事氏名(英)
幹事補佐氏名(和)
幹事補佐氏名(英)

講演論文情報詳細
申込み研究会 Pattern Recognition and Media Understanding (PRMU)
本文の言語 JPN
タイトル(和) 顔画像処理による対話型コミュニケーションの研究(顔とジェスチャの認識)
サブタイトル(和)
タイトル(英) Research of dialog type communication based on facial image processing
サブタイトル(和)
キーワード(1)(和/英) ヒューマンインタフェース / Human Interface
キーワード(2)(和/英) マルチモーダル対話 / Multi-modal Conversation
キーワード(3)(和/英) 口部パターン認識 / Mouth Part Pattern Recognition
キーワード(4)(和/英) 明度ヒストグラム解析 / Intensity Histogram Analysis
キーワード(5)(和/英) コンピュータビジョン / Computer Vision
第 1 著者 氏名(和/英) 西 奈津子 / Natsuko Nishi
第 1 著者 所属(和/英) 鹿児島大学大学院理工学研究科
Graduate School of Science and Engineering, Kagoshima University
第 2 著者 氏名(和/英) 渡邊 睦 / Mutsumi Watanabe
第 2 著者 所属(和/英) 鹿児島大学大学院理工学研究科
Graduate School of Science and Engineering, Kagoshima University
発表年月日 2003/11/14
資料番号 PRMU2003-160,HIP2003-66
巻番号(vol) vol.103
号番号(no) 453
ページ範囲 pp.-
ページ数 6
発行日