| 講演名 | 2016-03-05 Kinect v2による手話動作の3要素に基づく実時間手話認識 波多野 美歌(名工大), 酒向 慎司(名工大), 北村 正(名工大), |
|---|---|
| PDFダウンロードページ |  PDFダウンロードページへ |
| 抄録(和) | 手話認識の研究は途上であり，小語彙を対象としたものに留まっている．その理由として，音声言語のように表記体系が確立されていないことが挙げられる．さらに，大規模な手話認識用のデータベースが存在しないことも挙げられるが，手話の音韻学的知識の活用によって，手話単語の効率的なモデル化が期待できる．そこで本研究では，手話電子辞書の表記に基づき，手話単語を手形状，手の位置，動きの3要素によって定義し，手話単語認識システムを構成した．手話動作からの特徴量の取得にはKinect v2を用いた．複雑な形状変化を伴うため，3要素の中で特に実時間化が困難である手形状の認識には，輪郭線による認識手法を導入した．また，大量の単語データを必要としない方法で学習を行い，本認識システムの評価実験として，手話通訳士を起用した手話単語の認識実験を行った． |
| 抄録(英) | Existing research of sign language recognition deals with only small vocabulary. Sign language has no basic database and unit of recognition yet, compared with spoken language. However, adopting knowledge of linguistics can be useful to model sign language words for efficient large vocabulary recognition. We developed a real-time Japanese sign language recognition system. The system based on an electronic sign language word dictionary which defines each words with three elements of sign language: motion, position, and shape. Our system employs Kinect v2 sensor to obtain features from sign language motion. We apply a contour-based method to hand shape recognition which is the most difficult process to speed up in three elements. Also, our system does not use large amount of learning data. We conduct experiments to recognize Japanese sign language words targeted sign language interpreters. |
| キーワード(和) | 手話認識 / 実時間 / Kinect / 手形状 / 輪郭 |
| キーワード(英) | sign language recognition / real-time / Kinect / contour-based recognition |
| 資料番号 | WIT2015-99 |
| 発行日 | 2016-02-26 (WIT) |
| 研究会情報 | |
| 研究会 | WIT |
|---|---|
| 開催期間 | 2016/3/4(から2日開催) |
| 開催地（和） | 筑波技術大学春日キャンパス（つくば） |
| 開催地（英） | Tusukuba Univ. of Tech.(Tsukuba) |
| テーマ（和） | 聴覚・視覚障害者支援、一般 |
| テーマ（英） | Hearing / Visually impaired person support technology, etc. |
| 委員長氏名（和） | 布川 清彦(東京国際大) |
| 委員長氏名（英） | Kiyohiko Nunokawa(Tokyo International Univ.) |
| 副委員長氏名（和） | 和田 親宗(九工大) |
| 副委員長氏名（英） | Chikamune Wada(Kyushu Inst. of Tech.) |
| 幹事氏名（和） | 酒向 慎司(名工大) / 梶谷 勇(産総研) / 若月 大輔(筑波技大) |
| 幹事氏名（英） | Shinji Sakou(Nagoya Inst. of Tech.) / Isamu Kajitani(AIST) / Daisuke Wakatsuki(Tsukuba Univ. of Tech.) |
| 幹事補佐氏名（和） | 雨宮 智浩(NTT) / 塩野目 剛亮(筑波技大) / 宮城 愛美(筑波技大) |
| 幹事補佐氏名（英） | Tomohiro Amemiya(NTT) / Takeaki Shionome(Tsukuba Univ. of Tech.) / Manabi Miyagi(Tsukuba Univ. of Tech.) |
| 講演論文情報詳細 | |
| 申込み研究会 | Technical Committee on Well-being Information Technology |
|---|---|
| 本文の言語 | JPN |
| タイトル（和） | Kinect v2による手話動作の3要素に基づく実時間手話認識 |
| サブタイトル（和） | |
| タイトル（英） | Real-time Sign Language Recognition by Kinect v2 based on three Elements of Sign Language |
| サブタイトル（和） | |
| キーワード(1)（和/英） | 手話認識 / sign language recognition |
| キーワード(2)（和/英） | 実時間 / real-time |
| キーワード(3)（和/英） | Kinect / Kinect |
| キーワード(4)（和/英） | 手形状 / contour-based recognition |
| キーワード(5)（和/英） | 輪郭 |
| 第 1 著者 氏名（和/英） | 波多野 美歌 / Mika Hatano |
| 第 1 著者 所属（和/英） | 名古屋工業大学(略称：名工大) Nagoya Institute of Technology(略称：NITech) |
| 第 2 著者 氏名（和/英） | 酒向 慎司 / Shinji Sako |
| 第 2 著者 所属（和/英） | 名古屋工業大学(略称：名工大) Nagoya Institute of Technology(略称：NITech) |
| 第 3 著者 氏名（和/英） | 北村 正 / Tadashi Kitamura |
| 第 3 著者 所属（和/英） | 名古屋工業大学(略称：名工大) Nagoya Institute of Technology(略称：NITech) |
| 発表年月日 | 2016-03-05 |
| 資料番号 | WIT2015-99 |
| 巻番号（vol） | vol.115 |
| 号番号（no） | WIT-491 |
| ページ範囲 | pp.59-64(WIT), |
| ページ数 | 6 |
| 発行日 | 2016-02-26 (WIT) |