講演名 1999/3/23
マルチモーダル手話データベースと手話認識への応用
野津 拓人, 澤田 秀之, 橋本 周司,
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 近年、聴覚障害者の主なコミーニケーション手段である手話を工学的に扱う研究が多く行われている。手話の認識や生成などがその主な目的であるが、その際に手話のデータを検索、蓄積する機構が必要となる。現在、そのような、手話のデータベースはすでにいくつか提案されているが、その多くが日本語でインデックス付けされた動画像によるデータベースであり、手話を入力とした検索は困難である。本論文では動画像に加え、加速度センサ、位置センサ、データグローブを被験者に装着することにより得られる動作情報を持つマルチモーダル手話単語データベースを構築し、意味からおよび手話ジェスチャーの両方から検索できるシステムを制作している。ここではその概要とこれまでの成果を報告する。
抄録(英) Recently, there are many researches for sign language which is the most important means of communication for a person with auditory disability. The principal aim of these research is recognition and synthesis of sign language, and the system which can search and store sign words is necessarily required. The sign language databases are mostly consist of motion pictures and index words, which makes it difficult that we search meaning from gesture. This paper describes the multimodal database which have information obtained from not only movie but also acceleration sensor, position sensor and dataglove. We are constructing a bi-directtional data retrieval system to use key words and gestures.
キーワード(和) 手話データベース / 動作情報 / 加速度センサ / VQ / HMM / 手話認識
キーワード(英) JSL-Database / Motion data / Accelaration sensor / VQ / HMM / sign language recognition
資料番号 HIP98-56
発行日

研究会情報
研究会 HIP
開催期間 1999/3/23(から1日開催)
開催地(和)
開催地(英)
テーマ(和)
テーマ(英)
委員長氏名(和)
委員長氏名(英)
副委員長氏名(和)
副委員長氏名(英)
幹事氏名(和)
幹事氏名(英)
幹事補佐氏名(和)
幹事補佐氏名(英)

講演論文情報詳細
申込み研究会 Human Information Processing (HIP)
本文の言語 JPN
タイトル(和) マルチモーダル手話データベースと手話認識への応用
サブタイトル(和)
タイトル(英) Multimodal JSL Database and Application for Sign Language Recognition
サブタイトル(和)
キーワード(1)(和/英) 手話データベース / JSL-Database
キーワード(2)(和/英) 動作情報 / Motion data
キーワード(3)(和/英) 加速度センサ / Accelaration sensor
キーワード(4)(和/英) VQ / VQ
キーワード(5)(和/英) HMM / HMM
キーワード(6)(和/英) 手話認識 / sign language recognition
第 1 著者 氏名(和/英) 野津 拓人 / Takuto Notsu
第 1 著者 所属(和/英) 早稲田大学理工学部 応用物理学科
Dept. of Applied Physics, School of Science and Engineering Waseda University
第 2 著者 氏名(和/英) 澤田 秀之 / Hideyuki Sawada
第 2 著者 所属(和/英) 早稲田大学理工学部 応用物理学科
Dept. of Applied Physics, School of Science and Engineering Waseda University
第 3 著者 氏名(和/英) 橋本 周司 / Shuji Hashimoto
第 3 著者 所属(和/英) 早稲田大学理工学部 応用物理学科
Dept. of Applied Physics, School of Science and Engineering Waseda University
発表年月日 1999/3/23
資料番号 HIP98-56
巻番号(vol) vol.98
号番号(no) 683
ページ範囲 pp.-
ページ数 6
発行日