講演名 2008-06-19
手の位置と動きに着目したHMMによる手話単語の認識(一般,膨大なデータから学ぶもの)
前畠 大, 西田 昌史, 堀内 靖雄, 黒岩 眞吾,
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 手話においては,手の位置によって単語の意味合いが異なることから,本研究では手の位置と動きに着目して,これらを統合した手話単語の認識手法について検討を行った.手の位置は発話単位で正規化を行い,位置座標のフレーム差分を動きとして特徴量に加えてHMMにより単語ごとにモデル化を行った.また,単語によって手の位置と動きの重要度が異なると考え,それらを分析するためにマルチストリームHMMによる認識も行った.その結果,位置座標のみでは67.1%の認識精度に対して動きを加えることで79.9%の認識精度が得られた.さらに,マルチストリームHMMによる重みを変動させたところ,位置よりも動きの重要性が大きいことが明らかになった.
抄録(英) In sign language, the meaning of a word varies with hand positions. Thus, we studied on word recognition method integrated the position and movement of hands. The hand position was normalized for each utterance. We extracted the difference between frames as the movement from the position coordinate. The word recognition was performed using hidden Markov model based on these features. Furthermore, we assumed that the importance of the position and movement of hands changes with words and also performed the word recognition by the multi-stream HMM. As a result, recognition accuracy was 67.1% by using only hand position and was 79.9% by using both of the position and movement of hands. Moreover, we demonstrated that the importance of the movement was larger than the position by the multi-stream HMM.
キーワード(和) 手話認識 / 手の位置 / 手の動き / HMM / マルチストリーム
キーワード(英) Sign Language / hand position / hand movement / hidden Markov model / multi-stream
資料番号 DE2008-2,PRMU2008-20
発行日

研究会情報
研究会 PRMU
開催期間 2008/6/12(から1日開催)
開催地(和)
開催地(英)
テーマ(和)
テーマ(英)
委員長氏名(和)
委員長氏名(英)
副委員長氏名(和)
副委員長氏名(英)
幹事氏名(和)
幹事氏名(英)
幹事補佐氏名(和)
幹事補佐氏名(英)

講演論文情報詳細
申込み研究会 Pattern Recognition and Media Understanding (PRMU)
本文の言語 JPN
タイトル(和) 手の位置と動きに着目したHMMによる手話単語の認識(一般,膨大なデータから学ぶもの)
サブタイトル(和)
タイトル(英) Sign Language Recognition Based on Position and Movement Using Hidden Markov Model
サブタイトル(和)
キーワード(1)(和/英) 手話認識 / Sign Language
キーワード(2)(和/英) 手の位置 / hand position
キーワード(3)(和/英) 手の動き / hand movement
キーワード(4)(和/英) HMM / hidden Markov model
キーワード(5)(和/英) マルチストリーム / multi-stream
第 1 著者 氏名(和/英) 前畠 大 / Masaru MAEBATAKE
第 1 著者 所属(和/英) 千葉大学大学院融合科学研究科情報科学専攻
Graduate School of Advanced Intergration Science, Chiba University
第 2 著者 氏名(和/英) 西田 昌史 / Masafumi NISHIDA
第 2 著者 所属(和/英) 千葉大学大学院融合科学研究科情報科学専攻
Graduate School of Advanced Intergration Science, Chiba University
第 3 著者 氏名(和/英) 堀内 靖雄 / Yasuo HORIUCHI
第 3 著者 所属(和/英) 千葉大学大学院融合科学研究科情報科学専攻
Graduate School of Advanced Intergration Science, Chiba University
第 4 著者 氏名(和/英) 黒岩 眞吾 / Shingo KUROIWA
第 4 著者 所属(和/英) 千葉大学大学院融合科学研究科情報科学専攻
Graduate School of Advanced Intergration Science, Chiba University
発表年月日 2008-06-19
資料番号 DE2008-2,PRMU2008-20
巻番号(vol) vol.108
号番号(no) 94
ページ範囲 pp.-
ページ数 6
発行日