| 講演名 | 2015-03-19 一人称映像からの行動認識のための骨格推定(テーマセッション,スマート・ウェアラブルデバイスに向けたパターン認識,生活を守るウェアラブルデバイス) 米本 悠, 村崎 和彦, 大澤 達哉, 数藤 恭子, 島村 潤, 谷口 行信, |
|---|---|
| PDFダウンロードページ |  PDFダウンロードページへ |
| 抄録(和) | 撮影者の頭部に着けたカメラで撮影される一人称映像から,撮影者の動きを記述する特徴量として骨格姿勢を推定する手法を提案する.関節角と関節間の長さによって表現される骨格姿勢により,人の動きを直接的に記述でき,動きに対する見えの違いによらない記述が可能であるが,従来の骨格姿勢推定アルゴリズムは,対象となる人物の全身が映っているという前提があり,撮影者の体が部分的にしか映らない一人称映像において骨格姿勢を推定することはできなかった.提案手法では,一人称視点のデプス画像を入力とし,カメラの位置姿勢,ユーザの体型に関する事前情報,デプス画像上の手腕関節の位置を骨格姿勢の制約として用い,時系列の情報を考慮した骨格姿勢追跡手法を提案する.実験により,手先位置だけでなく,ひじ・肩・胸といった映像に映らない関節位置をも推定が可能であることが示された.さらに,推定された骨格姿勢を行動認識において特徴量として用いることで,画像内での手の動きを特徴量とする場合に比べ,よそ見などの視点移動に対し頑健に認識が可能であることが示された. |
| 抄録(英) | In this paper, we present a novel method to estimate articulated human pose for ego-centric action recognition. Many researches of action recognition from third-person vision have shown that articulated human pose is a feature which directly dscribes human motion, and is invaliant to the view from camera. However, they assume the whole figure of subjects appears in the image and ,in our best knowlege, no method for estimating articulated pose from ego-centric vision is proposed. Our method can extract the pose by integrating hand detection, camera pose estimation, and time-series filtering with the constraint of body shape. The experimental evaluations show that joint positions are correctly estimated even though they do not appear in the image, and that the accuracy of action recognition is improved through motion features based on estimated poses compared with motion features extracted from only hand position in the image. |
| キーワード(和) | 一人称映像 / 行動認識 / 骨格姿勢推定 |
| キーワード(英) | action recognition / articulated pose estimation / ego-centric vision |
| 資料番号 | BioX2014-56,PRMU2014-176 |
| 発行日 |
| 研究会情報 | |
| 研究会 | PRMU |
|---|---|
| 開催期間 | 2015/3/12(から1日開催) |
| 開催地（和） | |
| 開催地（英） | |
| テーマ（和） | |
| テーマ（英） | |
| 委員長氏名（和） | |
| 委員長氏名（英） | |
| 副委員長氏名（和） | |
| 副委員長氏名（英） | |
| 幹事氏名（和） | |
| 幹事氏名（英） | |
| 幹事補佐氏名（和） | |
| 幹事補佐氏名（英） | |
| 講演論文情報詳細 | |
| 申込み研究会 | Pattern Recognition and Media Understanding (PRMU) |
|---|---|
| 本文の言語 | JPN |
| タイトル（和） | 一人称映像からの行動認識のための骨格推定(テーマセッション,スマート・ウェアラブルデバイスに向けたパターン認識,生活を守るウェアラブルデバイス) |
| サブタイトル（和） | |
| タイトル（英） | Articulated pose estimation from ego-centric vision for action recognition |
| サブタイトル（和） | |
| キーワード(1)（和/英） | 一人称映像 / action recognition |
| キーワード(2)（和/英） | 行動認識 / articulated pose estimation |
| キーワード(3)（和/英） | 骨格姿勢推定 / ego-centric vision |
| 第 1 著者 氏名（和/英） | 米本 悠 / Haruka YONEMOTO |
| 第 1 著者 所属（和/英） | 日本電信電話株式会社メディアインテリジェンス研究所 NIPPON TELEGRAPH AND TELEPHONE CORPORATION, NTT Media Intelligence Laboratories |
| 第 2 著者 氏名（和/英） | 村崎 和彦 / Kazuhiko MURASAKI |
| 第 2 著者 所属（和/英） | 日本電信電話株式会社メディアインテリジェンス研究所 NIPPON TELEGRAPH AND TELEPHONE CORPORATION, NTT Media Intelligence Laboratories |
| 第 3 著者 氏名（和/英） | 大澤 達哉 / Tatsuya OSAWA |
| 第 3 著者 所属（和/英） | 日本電信電話株式会社メディアインテリジェンス研究所 NIPPON TELEGRAPH AND TELEPHONE CORPORATION, NTT Media Intelligence Laboratories |
| 第 4 著者 氏名（和/英） | 数藤 恭子 / Kyoko SUDO |
| 第 4 著者 所属（和/英） | 日本電信電話株式会社メディアインテリジェンス研究所 NIPPON TELEGRAPH AND TELEPHONE CORPORATION, NTT Media Intelligence Laboratories |
| 第 5 著者 氏名（和/英） | 島村 潤 / Jun SHIMAMURA |
| 第 5 著者 所属（和/英） | 日本電信電話株式会社メディアインテリジェンス研究所 NIPPON TELEGRAPH AND TELEPHONE CORPORATION, NTT Media Intelligence Laboratories |
| 第 6 著者 氏名（和/英） | 谷口 行信 / Yukinobu TANIGUCHI |
| 第 6 著者 所属（和/英） | 日本電信電話株式会社メディアインテリジェンス研究所 NIPPON TELEGRAPH AND TELEPHONE CORPORATION, NTT Media Intelligence Laboratories |
| 発表年月日 | 2015-03-19 |
| 資料番号 | BioX2014-56,PRMU2014-176 |
| 巻番号（vol） | vol.114 |
| 号番号（no） | 521 |
| ページ範囲 | pp.- |
| ページ数 | 6 |
| 発行日 | |