講演名 2013-09-02
映像閲覧行動の時空間ずれ構造モデルを用いた注視点予測(テーマセッション,機械学習と視覚情報処理の接点,及び,社会テーマ:ハイリスク作業支援)
米谷 竜, 川嶋 宏彰, 松山 隆司,
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 人間が一般の映像を閲覧する状況では,映像中において人間の視覚的注意を引きつける顕著領域と,実際の注視点との間に時空間的なずれが生まれる.このずれは,顕著領域の変動(顕著性変動)に対する反応遅れや動き予測に起因するものであり,変動の種類によってその程度が異なる.本研究では,顕著領域・注視点間のずれが持つ構造と顕著性変動の関係性に基づいて,映像から注視点を予測する手法を提案する.提案手法は,注視点に対して時空間ずれをともなって観測される顕著性変動パターンを,単純な変動パターンの組み合わせによって表現する.これにより,「注視点の近傍でどのような顕著性変動パターンがどのような時空間ずれとともに観測されやすいか」をデータドリブンに学習することによる注視点予測が実現できる.
抄録(英) When we are watching videos, there exist spatiotemporal gaps between salient regions that attract visual attention and actual points of gaze. These gaps result from reaction delays or anticipation in eye movements toward dynamic changes of the salient regions (saliency dynamics). In this paper, we exploit the underlying structures of the gaps for gaze point prediction from videos. The proposed method involves the relationships between the gaps and the saliency dynamics by introducing localized primitive patterns of salient regions for the description of saliency dynamics. It enables us to learn ``what types of saliency dynamics can be observed around the points of gaze'' in a data-driven fashion for the gaze point prediction.
キーワード(和) 顕著性変動 / 視線運動 / 非負値行列因子分解
キーワード(英) saliency dynamics / eye movements / non-negative matrix factorization
資料番号 PRMU2013-41,IBISML2013-21
発行日

研究会情報
研究会 IBISML
開催期間 2013/8/26(から1日開催)
開催地(和)
開催地(英)
テーマ(和)
テーマ(英)
委員長氏名(和)
委員長氏名(英)
副委員長氏名(和)
副委員長氏名(英)
幹事氏名(和)
幹事氏名(英)
幹事補佐氏名(和)
幹事補佐氏名(英)

講演論文情報詳細
申込み研究会 Information-Based Induction Sciences and Machine Learning (IBISML)
本文の言語 JPN
タイトル(和) 映像閲覧行動の時空間ずれ構造モデルを用いた注視点予測(テーマセッション,機械学習と視覚情報処理の接点,及び,社会テーマ:ハイリスク作業支援)
サブタイトル(和)
タイトル(英) Gaze Point Prediction with Gap Structure Models
サブタイトル(和)
キーワード(1)(和/英) 顕著性変動 / saliency dynamics
キーワード(2)(和/英) 視線運動 / eye movements
キーワード(3)(和/英) 非負値行列因子分解 / non-negative matrix factorization
第 1 著者 氏名(和/英) 米谷 竜 / Ryo YONETANI
第 1 著者 所属(和/英) 京都大学大学院情報科学研究科
Graduate School of Informatics, Kyoto University
第 2 著者 氏名(和/英) 川嶋 宏彰 / Hiroaki KAWASHIMA
第 2 著者 所属(和/英) 京都大学大学院情報科学研究科
Graduate School of Informatics, Kyoto University
第 3 著者 氏名(和/英) 松山 隆司 / Takashi MATSUYAMA
第 3 著者 所属(和/英) 京都大学大学院情報科学研究科
Graduate School of Informatics, Kyoto University
発表年月日 2013-09-02
資料番号 PRMU2013-41,IBISML2013-21
巻番号(vol) vol.113
号番号(no) 197
ページ範囲 pp.-
ページ数 6
発行日