講演名 2019-03-18
振り返り支援のための深層学習に基づく物体認識と手の移動軌跡に基づいた生活行動認識の検討
兒島 宏樹(阪工大), 大井 翔(立命館大), 佐野 睦夫(阪工大),
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 本研究室では高次脳機能障害者や高齢者に料理や掃除などの日常生活行動をベースとした認知リハビリテーション方式について研究を行っている.現在までに3人称視点を用いた掃除行動推定法について研究し,高次脳機能障害患者に対して実験を行った.掃除行動の推定には深層学習を用いた物体認識アルゴリズムYOLOで掃除用具の認識,人の骨格検出アルゴリズムOpenPoseで人の向き推定,それぞれの結果から掃除行動の推定を行った.しかし人の向き推定結果の誤検出が多く発生した,よって過去の向き結果を用いた多数決による誤り訂正の手法を実装した結果30.8%の出力の違いが得られた.今回,新たに生活オブジェクトと手の移動量を特徴量として追加した生活行動推定法の認識精度について研究を行った.結果として,顔の向き情報と左右の手首の移動量,物体の移動量を使用し時間連続性を考慮した誤り訂正を組み合わせた行動認識手法で全体的な行動認識の精度は向上した.
抄録(英) In our laboratory, we have been studying cognitive rehabilitation for patients with acquired brain injury and dementia based on activities daily living (ADL) such as cooking and clearing. We proposed a method of cleaning behavior estimation using deep learning and conducted experiments of cleaning behavior to patients with acquired brain injury. Specifically, we estimated cleaning behavior using cleaning tools and cleaning area (person's direction). Cleaning tools are recognized by YOLO algorithm, person's directions are recognized by OpenPose algorithm. However, in this method, there were many misrecognition. Therefore, we add movement trajectory of object and hand as feature and describe recognition accuracy of ADL behavior. As a result, accuracy was improved by a method of error correction method which considers time continuity when features are face orientation, hand movement, and object movement.
キーワード(和) 日常生活行動 / 振り返り支援 / YOLO / OpenPose / 生活行動認識
キーワード(英) ADL / Self Support / YOLO / OpenPose / Living Behavior Recognition
資料番号 BioX2018-51,PRMU2018-155
発行日 2019-03-10 (BioX, PRMU)

研究会情報
研究会 PRMU / BioX
開催期間 2019/3/17(から2日開催)
開催地(和) 電気通信大学
開催地(英)
テーマ(和) 社会と産業における安全・安心を支える認識・認証技術
テーマ(英)
委員長氏名(和) 佐藤 真一(NII) / 鷲見 和彦(青学大)
委員長氏名(英) Shinichi Sato(NII) / Kazuhiko Sumi(AGU)
副委員長氏名(和) 井尻 善久(オムロン) / 玉木 徹(広島大) / 今岡 仁(NEC) / 大木 哲史(静岡大)
副委員長氏名(英) Yoshihisa Ijiri(Omron) / Toru Tamaki(Hiroshima Univ.) / Hitoshi Imaoka(NEC) / Tetsushi Ohki(Shizuoka Univ.)
幹事氏名(和) 石井 雅人(NEC) / 菅野 裕介(阪大) / 青木 隆浩(富士通研) / 市野 将嗣(電通大)
幹事氏名(英) Masato Ishii(NEC) / Yusuke Sugano(Osaka Univ.) / Takahiro Aoki(Fujitsu Labs.) / Masatsugu Ichino(Univ. of Electro-Comm.)
幹事補佐氏名(和) 入江 豪(NTT) / 牛久 祥孝(東大) / 奥井 宣広(KDDI総合研究所) / 渡部 大志(埼玉工大)
幹事補佐氏名(英) Go Irie(NTT) / Yoshitaka Ushiku(Univ. of Tokyo) / Norihiro Okui(KDDI Research) / Daishi Watabe(Saitama Inst. of Tech.)

講演論文情報詳細
申込み研究会 Technical Committee on Pattern Recognition and Media Understanding / Technical Committee on Biometrics
本文の言語 JPN
タイトル(和) 振り返り支援のための深層学習に基づく物体認識と手の移動軌跡に基づいた生活行動認識の検討
サブタイトル(和)
タイトル(英) ADL Recognition based on Movement Trajectory of Hand and Object Recognition using Deep Learning for Self-Support
サブタイトル(和)
キーワード(1)(和/英) 日常生活行動 / ADL
キーワード(2)(和/英) 振り返り支援 / Self Support
キーワード(3)(和/英) YOLO / YOLO
キーワード(4)(和/英) OpenPose / OpenPose
キーワード(5)(和/英) 生活行動認識 / Living Behavior Recognition
第 1 著者 氏名(和/英) 兒島 宏樹 / Hiroki Kojima
第 1 著者 所属(和/英) 大阪工業大学大学院(略称:阪工大)
Graduate School of Osaka Institute of Technology(略称:OIT)
第 2 著者 氏名(和/英) 大井 翔 / Sho Ooi
第 2 著者 所属(和/英) 立命館大学(略称:立命館大)
Ritsumeikan University(略称:Rits)
第 3 著者 氏名(和/英) 佐野 睦夫 / Mutsuo Sano
第 3 著者 所属(和/英) 大阪工業大学(略称:阪工大)
Osaka Institute of Technology(略称:OIT)
発表年月日 2019-03-18
資料番号 BioX2018-51,PRMU2018-155
巻番号(vol) vol.118
号番号(no) BioX-512,PRMU-513
ページ範囲 pp.131-136(BioX), pp.131-136(PRMU),
ページ数 6
発行日 2019-03-10 (BioX, PRMU)