| 講演名 | 2001/1/24 実時間の手話認識を目的とした3次元動作推定システム 山城 毅, 小渡 悟, 神里 志穂子, 新垣 武士, 星野 聖, |
|---|---|
| PDFダウンロードページ | PDFダウンロードページへ |
| 抄録(和) | 単眼カメラにより奥行き運動を伴う手話動作要素推定を行うために, 3次元要素の多面体で構成される片腕あたり9自由度の3次元人体モデルを用意し, 単眼カメラからの2次元動画像を当てはめるシステムを構築した.また, 顔や他の身体部位による自己遮蔽にもロバストな処理を実現するため, 3フレーム前までのオプティカルフローをもとに現時刻の運動指定を行った.本システムを用いて, 静止, 直線, 円, 円弧, それらの組み合わせ, といった動作要素を持つ動作の運動指定を行ったところ, 高い精度でのジェスチャ追跡を実現することができた.また, 特別な専用ハードウエアなしにコンピュータグラフィクスにより3次元動作を再現する実験でも, 1フレーム当たり0.34msのジェスチャ再現が可能であった.一連の結果は, 本システムが単眼カメラによる3次元手指運動推定に有効であることを示していた. |
| 抄録(英) | The purpose of this study is to estimate three-dimensional motions of the sign language with a single camera. In the system, a three-dimensional human model with three-dimensional polyhedrons with nine degrees of freedom was prepared, and two-dimensional image sequences with a CCD camera were applied. Moreover, optical flows in three frames before current time were used for the motion estimation, so that the system can be robust to self-occlusions by performer's own face and body. In the experiment, standstill, straight, circular, arc motions and their combinations were adopted for the estimation. As the results, the system realized the gesture estimation and tracking with high accuracy. In the experiment of reproducing three-dimensional motions with computer graphics, gesture reproductions were performed within 0.34ms per a frame without any specific computer hardwares. These results showed that the system is effective for three-dimensional motion estimation for sign language with a single CCD camera. |
| キーワード(和) | 手話 / 3次元運動要素推定 / 3次元人体モデル / オプティカルフロー / 自己遮蔽 / ジェスチャ再現 |
| キーワード(英) | sign language / three-dimensional motion estimation / three-dimensional human model / optical flows / self-occlusions / gesture reproduction |
| 資料番号 | EID2000-309,IE2000-164 |
| 発行日 |
| 研究会情報 | |
| 研究会 | EID |
|---|---|
| 開催期間 | 2001/1/24(から1日開催) |
| 開催地（和） | |
| 開催地（英） | |
| テーマ（和） | |
| テーマ（英） | |
| 委員長氏名（和） | |
| 委員長氏名（英） | |
| 副委員長氏名（和） | |
| 副委員長氏名（英） | |
| 幹事氏名（和） | |
| 幹事氏名（英） | |
| 幹事補佐氏名（和） | |
| 幹事補佐氏名（英） | |
| 講演論文情報詳細 | |
| 申込み研究会 | Electronic Information Displays (EID) |
|---|---|
| 本文の言語 | JPN |
| タイトル（和） | 実時間の手話認識を目的とした3次元動作推定システム |
| サブタイトル（和） | |
| タイトル（英） | Three-dimensional motion estimation for real-time recognition of sign language |
| サブタイトル（和） | |
| キーワード(1)（和/英） | 手話 / sign language |
| キーワード(2)（和/英） | 3次元運動要素推定 / three-dimensional motion estimation |
| キーワード(3)（和/英） | 3次元人体モデル / three-dimensional human model |
| キーワード(4)（和/英） | オプティカルフロー / optical flows |
| キーワード(5)（和/英） | 自己遮蔽 / self-occlusions |
| キーワード(6)（和/英） | ジェスチャ再現 / gesture reproduction |
| 第 1 著者 氏名（和/英） | 山城 毅 / Tsuyoshi YAMASHIRO |
| 第 1 著者 所属（和/英） | 琉球大学工学部 Faculty of Engineering, University of the Ryukyus |
| 第 2 著者 氏名（和/英） | 小渡 悟 / Satoru ODO |
| 第 2 著者 所属（和/英） | 琉球大学工学部 Faculty of Engineering, University of the Ryukyus |
| 第 3 著者 氏名（和/英） | 神里 志穂子 / Shihoko KAMISATO |
| 第 3 著者 所属（和/英） | 琉球大学工学部 Faculty of Engineering, University of the Ryukyus |
| 第 4 著者 氏名（和/英） | 新垣 武士 / Takeshi ARAKAKI |
| 第 4 著者 所属（和/英） | 琉球大学工学部 Faculty of Engineering, University of the Ryukyus |
| 第 5 著者 氏名（和/英） | 星野 聖 / Kiyoshi HOSHINO |
| 第 5 著者 所属（和/英） | 科学技術振興事業団さきがけ研究21 Precursoy Research for Embryonic Science and Technology, Japan Science and Technology Corporation |
| 発表年月日 | 2001/1/24 |
| 資料番号 | EID2000-309,IE2000-164 |
| 巻番号（vol） | vol.100 |
| 号番号（no） | 605 |
| ページ範囲 | pp.- |
| ページ数 | 6 |
| 発行日 | |