| 講演名 | 2020-03-06 全身動作で操るVR人体モデルに容姿変換された自分の姿が映るアミューズメントにおける表情認識とAR技術の応用 楊 博文(日本工大), 生駒 哲一(日本工大), |
|---|---|
| PDFダウンロードページ |  PDFダウンロードページへ |
| 抄録(和) | 人の動作に対してリアルタイムに反応して遊ぶことのできるアミューズメントとして,顔認識技術によりカメラで取得した動画像から被験者の顔を美化する.美化された顔が,KinectV2で取得した深度情報およびスケルトン情報により全身動作で操る3D人体モデルに映る.上に述べたアミューズメントにおいて,人のスタイルと服装情報に基づいて人体モデルの外観を変化させる.さらに,表情を認識して顔の器官を拡大,口から噴火させるなどの効果をAR技術で実現して応用する一方法を検討する. |
| 抄録(英) | As an amusement that can be played in response to human motion in real time, the face of tester is beautified from image acquired by camera using face recognition technology. The beautified face is reflected on a 3D human body model operated by whole body motion based on the depth information and skeleton information acquired by KinectV2. Based on the amusement described above, the appearance of the human body model is changed based on the person's body size and clothing information. In addition, we consider a method of applying AR-effects based on facial expressions recognition, such as recognizing expanding facial organs, erupting fire from the mouth, etc. with AR technology. |
| キーワード(和) | アミューズメント / 顔部位認識 / スケルトン認識 / 深度情報 / 人の動作 / 表情認識 / AR技術 |
| キーワード(英) | Amusement / Face recognition / Skeleton recognition / Depth information / Human motion / Facial expressions recognition / AR technology |
| 資料番号 | CQ2019-157 |
| 発行日 | 2020-02-27 (CQ) |
| 研究会情報 | |
| 研究会 | IE / IMQ / MVE / CQ |
|---|---|
| 開催期間 | 2020/3/5(から2日開催) |
| 開催地（和） | 九州工業大学 戸畑キャンパス |
| 開催地（英） | Kyushu Institute of Technology |
| テーマ（和） | 五感メディア，マルチメディア，メディアエクスペリエンス， 映像符号化，イメージメディアの品質，ネットワークの品質 および信頼性，一般 （魅力工学（AC）研究会協賛） |
| テーマ（英） | |
| 委員長氏名（和） | 木全 英明(NTT) / 中口 俊哉(千葉大) / 間瀬 健二(名大) / 下西 英之(NEC) |
| 委員長氏名（英） | Hideaki Kimata(NTT) / Toshiya Nakaguchi(Chiba Univ.) / Kenji Mase(Nagoya Univ.) / Hideyuki Shimonishi(NEC) |
| 副委員長氏名（和） | 児玉 和也(NII) / 高橋 桂太(名大) / 前田 充(キヤノン) / 魚森 謙也(阪大) / 井原 雅行(NTT) / 岡本 淳(NTT) / 平栗 健史(日本工大) |
| 副委員長氏名（英） | Kazuya Kodama(NII) / Keita Takahashi(Nagoya Univ.) / Mitsuru Maeda(Canon) / Kenya Uomori(Osaka Univ.) / Masayuki Ihara(NTT) / Jun Okamoto(NTT) / Takefumi Hiraguri(Nippon Inst. of Tech.) |
| 幹事氏名（和） | 早瀬 和也(NTT) / 松尾 康孝(NHK) / 大橋 剛介(静岡大) / 齊藤 新一郎(ソニーセミコンダクタソリューションズ) / 平山 高嗣(名大) / 青木 良輔(NTT) / 大田 健紘(日本工大) / 木村 共孝(同志社大) / 山中 広明(NICT) |
| 幹事氏名（英） | Kazuya Hayase(NTT) / Yasutaka Matsuo(NHK) / Gosuke Ohashi(Shizuoka Univ.) / Shinichiro Saito(Sony Semiconductor Solutions) / Takatsugu Hirayama(Nagoya Univ.) / Ryosuke Aoki(NTT) / Kenko Ota(Nippon Inst. of Tech.) / Tomotaka Kimura(Doshisha Univ.) / Hiroaki Yamanaka(NICT) |
| 幹事補佐氏名（和） | 海野 恭平(KDDI総合研究所) / 福嶋 慶繁(名工大) / 工藤 博章(名大) / 土田 勝(NTT) / 平井 経太(千葉大) / 西口 敏司(阪工大) / 横山 正典(NTT) / 福嶋 政期(東大) / 佐々木 力(KDDI総合研究所) / 西川 由明(NEC) / 木村 拓人(NTT) |
| 幹事補佐氏名（英） | Kyohei Unno(KDDI Research) / Norishige Fukushima(Nagoya Inst. of Tech.) / Hiroaki Kudo(Nagoya Univ.) / Masaru Tsuchida(NTT) / Keita Hirai(Chiba Univ.) / Satoshi Nishiguchi(Oosaka Inst. of Tech.) / Masanori Yokoyama(NTT) / Shogo Fukushima(Univ. of ToKyo) / Chikara Sasaki(KDDI Research) / Yoshiaki Nishikawa(NEC) / Takuto Kimura(NTT) |
| 講演論文情報詳細 | |
| 申込み研究会 | Technical Committee on Image Engineering / Technical Committee on Image Media Quality / Technical Committee on Media Experience and Virtual Environment / Technical Committee on Communication Quality |
|---|---|
| 本文の言語 | JPN |
| タイトル（和） | 全身動作で操るVR人体モデルに容姿変換された自分の姿が映るアミューズメントにおける表情認識とAR技術の応用 |
| サブタイトル（和） | |
| タイトル（英） | Facial Expression Recognition with Application of Augmented Reality Technologyon Amusement of Human Body Model in Virtual Reality with Converted Appearanceof Oneself Operated by Whole Body Motion |
| サブタイトル（和） | |
| キーワード(1)（和/英） | アミューズメント / Amusement |
| キーワード(2)（和/英） | 顔部位認識 / Face recognition |
| キーワード(3)（和/英） | スケルトン認識 / Skeleton recognition |
| キーワード(4)（和/英） | 深度情報 / Depth information |
| キーワード(5)（和/英） | 人の動作 / Human motion |
| キーワード(6)（和/英） | 表情認識 / Facial expressions recognition |
| キーワード(7)（和/英） | AR技術 / AR technology |
| 第 1 著者 氏名（和/英） | 楊 博文 / Yang Bowen |
| 第 1 著者 所属（和/英） | 日本工業大学(略称：日本工大) Nippon Institute of Technology(略称：NIT) |
| 第 2 著者 氏名（和/英） | 生駒 哲一 / Ikoma Norikazu |
| 第 2 著者 所属（和/英） | 日本工業大学(略称：日本工大) Nippon Institute of Technology(略称：NIT) |
| 発表年月日 | 2020-03-06 |
| 資料番号 | CQ2019-157 |
| 巻番号（vol） | vol.119 |
| 号番号（no） | CQ-455 |
| ページ範囲 | pp.119-123(CQ), |
| ページ数 | 5 |
| 発行日 | 2020-02-27 (CQ) |