講演名 2021-12-17
時空間TCAVを用いた社会関係認識タスクにおける 映像認識モデルの判断根拠分析
杉山 瑠菜(立命館大), 吉 頴(名大), 王 彧(立命館大), 加藤 ジェーン(立命館大),
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 現在,映像から人物間の社会関係を認識するタスクは非常に困難な問題であり,更なる精度向上が求められる.精度を向上させるためには,モデルにどのような概念や属性を取り入れる必要があるかを分析する必要がある.そこで本研究では,時空間TCAVの手法を用いることで,人物間の社会関係認識タスクを対象とした映像認識モデルの判断根拠をコンセプトに基づき分析する.
抄録(英) Social relationships between people in videos are difficult to recognize with high accuracy using traditional methods. In order to radically enhance recognition accuracy, it is important to investigate which concepts or attributes are important and thus should be captured by the models. This is especially necessary for deep learning models because of a lack of transparency and interpretability. In this paper, for the task of social relationship recognition, we show how to analyze recognition grounds of video recognition models using concepts, based on spatio-temporal TCAV method.
キーワード(和) TCAV / 判断根拠分析 / 社会関係認識 / 映像認識
キーワード(英) TCAV / Decision Grounds Analysis / Relationship Recognition / Video Recognition
資料番号 PRMU2021-45
発行日 2021-12-09 (PRMU)

研究会情報
研究会 PRMU
開催期間 2021/12/16(から2日開催)
開催地(和) オンライン開催
開催地(英) Online
テーマ(和) 時系列・因果推論・異常検知
テーマ(英)
委員長氏名(和) 内田 誠一(九大)
委員長氏名(英) Seiichi Uchida(Kyushu Univ.)
副委員長氏名(和) 岩村 雅一(阪府大) / 安倍 満(デンソーアイティーラボラトリ)
副委員長氏名(英) Masakazu Iwamura(Osaka Pref. Univ.) / Mitsuru Anpai(Denso IT Lab.)
幹事氏名(和) 柴田 剛志(NTT) / 西山 正志(鳥取大)
幹事氏名(英) Takashi Shibata(NTT) / Masashi Nishiyama(Tottori Univ.)
幹事補佐氏名(和) 山口 光太(サイバーエージェント) / 松井 勇佑(東大)
幹事補佐氏名(英) Kouta Yamaguchi(CyberAgent) / Yusuke Matsui(Univ. of Tokyo)

講演論文情報詳細
申込み研究会 Technical Committee on Pattern Recognition and Media Understanding
本文の言語 JPN
タイトル(和) 時空間TCAVを用いた社会関係認識タスクにおける 映像認識モデルの判断根拠分析
サブタイトル(和)
タイトル(英) Analysis of Recognition Grounds of Models for Social Relationship Recognition Using Spatial-temporal TCAV
サブタイトル(和)
キーワード(1)(和/英) TCAV / TCAV
キーワード(2)(和/英) 判断根拠分析 / Decision Grounds Analysis
キーワード(3)(和/英) 社会関係認識 / Relationship Recognition
キーワード(4)(和/英) 映像認識 / Video Recognition
第 1 著者 氏名(和/英) 杉山 瑠菜 / Runa Sugiyama
第 1 著者 所属(和/英) 立命館大学(略称:立命館大)
Ritsumeikan University(略称:Ritsumeikan Univ.)
第 2 著者 氏名(和/英) 吉 頴 / Ying JI
第 2 著者 所属(和/英) 名古屋大学(略称:名大)
Nagoya University(略称:Nagoya Univ.)
第 3 著者 氏名(和/英) 王 彧 / Yu Wang
第 3 著者 所属(和/英) 立命館大学(略称:立命館大)
Ritsumeikan University(略称:Ritsumeikan Univ.)
第 4 著者 氏名(和/英) 加藤 ジェーン / Jien Kato
第 4 著者 所属(和/英) 立命館大学(略称:立命館大)
Ritsumeikan University(略称:Ritsumeikan Univ.)
発表年月日 2021-12-17
資料番号 PRMU2021-45
巻番号(vol) vol.121
号番号(no) PRMU-304
ページ範囲 pp.113-117(PRMU),
ページ数 5
発行日 2021-12-09 (PRMU)