講演名 2013-11-20
人物検出と顔向き推定に基づくTV視聴者の注視状態推定(「マルチモーダル」,「感性情報処理」,「視知覚とその応用」及びヒューマン情報処理一般)
高橋 正樹, クリピングデル サイモン, 奥田 誠, 山内 結子, 苗村 昌秀, 柴田 正啓,
PDFダウンロードページ PDFダウンロードページへ
抄録(和) デジタル放送やインターネットの普及に起因する映像コンテンツ量の増加に伴い,ユーザの趣味・嗜好を考慮した映像コンテンツの推薦技術が期待されている.本稿では,TVやPC画面への注視を基に映像コンテンツへの評価を自動推定する手法を提案する.汎用奥行きセンサから得られたデータを解析し,ユーザの検出,顔領域の追跡,顔向き推定を行う機能をモジュール化するとともに,各モジュールの出力を統合し,ユーザがディスプレイを注視しているか否かを推定する.一般の生活空間での実験を通し,本手法の有効性を確認した.
抄録(英) A method for estimating whether or not a TV viewer is watching the video content on the basis of the viewer's behaviors in a typical home environment is proposed. Using an input signal provided by a Kinect sensor, it identifies the presence of a viewer by extracting keypoint trajectories hi video sequences of that viewer. It then estimates whether the viewer is gazing at the video content or not on the basis of the viewer's head pose, which is estimated in two different ways: by a color image-based module and by a depth-image-based module. Results from the two modules are combined to increase robustness. To evaluate the proposed method, a simulation test on TV viewing in a typical living space was conducted. The simulation results suggest that the proposed method can robustly detect the viewer's gaze.
キーワード(和) Affect recognition / 顔追跡 / 映像評価 / ユーザインタフェース
キーワード(英) Affect recognition / Face tracking / Video-content assessment / Mulimodal user interface
資料番号 HIP2013-71
発行日

研究会情報
研究会 HIP
開催期間 2013/11/12(から1日開催)
開催地(和)
開催地(英)
テーマ(和)
テーマ(英)
委員長氏名(和)
委員長氏名(英)
副委員長氏名(和)
副委員長氏名(英)
幹事氏名(和)
幹事氏名(英)
幹事補佐氏名(和)
幹事補佐氏名(英)

講演論文情報詳細
申込み研究会 Human Information Processing (HIP)
本文の言語 JPN
タイトル(和) 人物検出と顔向き推定に基づくTV視聴者の注視状態推定(「マルチモーダル」,「感性情報処理」,「視知覚とその応用」及びヒューマン情報処理一般)
サブタイトル(和)
タイトル(英) Estimation of Viewer's Gaze State at Video Content on the Basis of Behaviors
サブタイトル(和)
キーワード(1)(和/英) Affect recognition / Affect recognition
キーワード(2)(和/英) 顔追跡 / Face tracking
キーワード(3)(和/英) 映像評価 / Video-content assessment
キーワード(4)(和/英) ユーザインタフェース / Mulimodal user interface
第 1 著者 氏名(和/英) 高橋 正樹 / Masaki TAKAHASHI
第 1 著者 所属(和/英) NHK放送技術研究所ハイブリッド放送システム研究部
NHK Science and Technology Research Laboratories
第 2 著者 氏名(和/英) クリピングデル サイモン / Simon CLIPPINGDALE
第 2 著者 所属(和/英) NHK放送技術研究所ハイブリッド放送システム研究部
NHK Science and Technology Research Laboratories
第 3 著者 氏名(和/英) 奥田 誠 / Makoto OKUDA
第 3 著者 所属(和/英) NHK放送技術研究所ハイブリッド放送システム研究部
NHK Science and Technology Research Laboratories
第 4 著者 氏名(和/英) 山内 結子 / Yuko YAMANOUCHI
第 4 著者 所属(和/英) NHK放送技術研究所ハイブリッド放送システム研究部
NHK Science and Technology Research Laboratories
第 5 著者 氏名(和/英) 苗村 昌秀 / Masahide NAEMURA
第 5 著者 所属(和/英) NHK放送技術研究所ハイブリッド放送システム研究部
NHK Science and Technology Research Laboratories
第 6 著者 氏名(和/英) 柴田 正啓 / Masahiro SHIBATA
第 6 著者 所属(和/英) NHK放送技術研究所ハイブリッド放送システム研究部
NHK Science and Technology Research Laboratories
発表年月日 2013-11-20
資料番号 HIP2013-71
巻番号(vol) vol.113
号番号(no) 299
ページ範囲 pp.-
ページ数 6
発行日