講演名 2000/3/16
オプティカルフローと音声トリガーを用いた手招き動作のリアルタイム認識
西村 正典, 西川 敦, 小荒 健吾, 宮崎 文夫,
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 人間の自然な身振り動作を非接触かつ無標点で自動認識する技術は, 人にやさしいヒューマンインタフェースシステムを構築する上で極めて重要である.我々人間が日常生活の中で最も多用している身振り動作として, 指示対象となる人や機械の移動方向等を手の反復動作により表現する"手招き動作"が挙げられる.本報告では, 人間の自然な手招き動作における身振りと言葉の時間的な関連性に着目し, 手招き動作を撮影した連続動画像の局所相関演算に基づくオプティカルフローから算出される手の移動速度と言葉による指示コマンドの発生タイミングを特徴量としてとらえ, 音声をトリガーとして用いることにより, 指示者の意図する支持方向を自動認識する手法を提案する.
抄録(英) Human naturally uses not only voices but also the gestures composed of cyclically repeated motion of the hand in daily life to express the direction in which he/she wants another person or machine to go. In this paper, we first mention that the vocalization timing correlates closely with the human intention expressed by such gestures. Then we propose a method to recognize the gesture's intention in real-time based on the hand motion velocity at the moment of gesture's vocalization estimated by the combination of the optical flow from motion images and the voice trigger extracted from the microphone input.
キーワード(和) 身振り認識 / 手招き動作 / オプティカルフロー / マルチモーダルインタフェース / 音声トリガー
キーワード(英) Gesture recognition / Cyclically repeated motion / Optical flow / Multimodal ingerface / Voice trigger
資料番号 NLC99-70,PRMU99-253
発行日

研究会情報
研究会 NLC
開催期間 2000/3/16(から1日開催)
開催地(和)
開催地(英)
テーマ(和)
テーマ(英)
委員長氏名(和)
委員長氏名(英)
副委員長氏名(和)
副委員長氏名(英)
幹事氏名(和)
幹事氏名(英)
幹事補佐氏名(和)
幹事補佐氏名(英)

講演論文情報詳細
申込み研究会 Natural Language Understanding and Models of Communication (NLC)
本文の言語 JPN
タイトル(和) オプティカルフローと音声トリガーを用いた手招き動作のリアルタイム認識
サブタイトル(和)
タイトル(英) Real-Time Recognition of Gestures Expressed by Cyclically Repeated Motion of the Hand Using Optical Flow and Voice Trigger
サブタイトル(和)
キーワード(1)(和/英) 身振り認識 / Gesture recognition
キーワード(2)(和/英) 手招き動作 / Cyclically repeated motion
キーワード(3)(和/英) オプティカルフロー / Optical flow
キーワード(4)(和/英) マルチモーダルインタフェース / Multimodal ingerface
キーワード(5)(和/英) 音声トリガー / Voice trigger
第 1 著者 氏名(和/英) 西村 正典 / Masanori NISHIMURA
第 1 著者 所属(和/英) 大阪大学大学院基礎工学研究科システム人間系専攻機械科学分野
Division of Mechanical Science, Department of Systems and Human Science, Graduate School of Engineering Science, Osaka University
第 2 著者 氏名(和/英) 西川 敦 / Atsushi NISHIKAWA
第 2 著者 所属(和/英) 大阪大学大学院基礎工学研究科システム人間系専攻機械科学分野
Division of Mechanical Science, Department of Systems and Human Science, Graduate School of Engineering Science, Osaka University
第 3 著者 氏名(和/英) 小荒 健吾 / Kengo KOARA
第 3 著者 所属(和/英) 大阪大学大学院基礎工学研究科システム人間系専攻機械科学分野
Division of Mechanical Science, Department of Systems and Human Science, Graduate School of Engineering Science, Osaka University
第 4 著者 氏名(和/英) 宮崎 文夫 / Fumio MIYAZAKI
第 4 著者 所属(和/英) 大阪大学大学院基礎工学研究科システム人間系専攻機械科学分野
Division of Mechanical Science, Department of Systems and Human Science, Graduate School of Engineering Science, Osaka University
発表年月日 2000/3/16
資料番号 NLC99-70,PRMU99-253
巻番号(vol) vol.99
号番号(no) 707
ページ範囲 pp.-
ページ数 8
発行日