講演名 2021-12-17
アーカイブを活用したダイジェスト映像自動生成フレームワーク
渡辺 はるな(NEC), 白石 壮馬(NEC), 朴 君(NEC), 高橋 勝彦(NEC), 鍋藤 悠(NECソリューションイノベータ),
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 映像認識技術の1つである映像要約タスクにおいて,特に教師あり学習を行う手法の場合には,人間が映像中のハイライト箇所をラベル付けしたデータが必要であり,正解ラベルの作成にコストがかかるという課題がある.本稿では放送局等が持つ映像アーカイブを活用した,人手によるラベル付けが不要なダイジェスト映像生成フレームワークを提案する.実験ではSumMeデータセットを用いて,提案する自動ラベル生成処理の精度を評価した.また自動生成した正解ラベルを用いて映像要約モデルを学習してその要約精度の評価を行い,人間がラベル付けしたデータで学習した場合に匹敵する精度が得られることを確認し,提案するフレームワークの有効性を示した.
抄録(英) For the video summarization model, especially in the case of supervised learning methods, it is necessary to have the training video data where the highlights in the video are annotated by human.The annotation process is very labor intensive and costly.We therefore propose a framework for video summarization that utilizes broadcast video archives and does not require manual annotation.In the experiment, we evaluated the accuracy of our automatic annotation process.We also compared the estimation accuracy of a video summarization model trained on automatically generated data with that of a model trained on the data annotated by human.The former model achieved comparable performance to the latter model.This indicates that our framework is effective.
キーワード(和) 映像アーカイブ / 映像要約 / 映像認識 / 自動ラベル生成
キーワード(英) video archive / video summarization / video recognition / automatic annotation
資料番号 PRMU2021-47
発行日 2021-12-09 (PRMU)

研究会情報
研究会 PRMU
開催期間 2021/12/16(から2日開催)
開催地(和) オンライン開催
開催地(英) Online
テーマ(和) 時系列・因果推論・異常検知
テーマ(英)
委員長氏名(和) 内田 誠一(九大)
委員長氏名(英) Seiichi Uchida(Kyushu Univ.)
副委員長氏名(和) 岩村 雅一(阪府大) / 安倍 満(デンソーアイティーラボラトリ)
副委員長氏名(英) Masakazu Iwamura(Osaka Pref. Univ.) / Mitsuru Anpai(Denso IT Lab.)
幹事氏名(和) 柴田 剛志(NTT) / 西山 正志(鳥取大)
幹事氏名(英) Takashi Shibata(NTT) / Masashi Nishiyama(Tottori Univ.)
幹事補佐氏名(和) 山口 光太(サイバーエージェント) / 松井 勇佑(東大)
幹事補佐氏名(英) Kouta Yamaguchi(CyberAgent) / Yusuke Matsui(Univ. of Tokyo)

講演論文情報詳細
申込み研究会 Technical Committee on Pattern Recognition and Media Understanding
本文の言語 JPN
タイトル(和) アーカイブを活用したダイジェスト映像自動生成フレームワーク
サブタイトル(和)
タイトル(英) Automatic Video Summarization Using Archive of Edited Videos
サブタイトル(和)
キーワード(1)(和/英) 映像アーカイブ / video archive
キーワード(2)(和/英) 映像要約 / video summarization
キーワード(3)(和/英) 映像認識 / video recognition
キーワード(4)(和/英) 自動ラベル生成 / automatic annotation
第 1 著者 氏名(和/英) 渡辺 はるな / Haruna Watanabe
第 1 著者 所属(和/英) 日本電気株式会社(略称:NEC)
NEC Corporation(略称:NEC)
第 2 著者 氏名(和/英) 白石 壮馬 / Soma Shiraishi
第 2 著者 所属(和/英) 日本電気株式会社(略称:NEC)
NEC Corporation(略称:NEC)
第 3 著者 氏名(和/英) 朴 君 / Jun Piao
第 3 著者 所属(和/英) 日本電気株式会社(略称:NEC)
NEC Corporation(略称:NEC)
第 4 著者 氏名(和/英) 高橋 勝彦 / Katsuhiko Takahashi
第 4 著者 所属(和/英) 日本電気株式会社(略称:NEC)
NEC Corporation(略称:NEC)
第 5 著者 氏名(和/英) 鍋藤 悠 / Yu Nabeto
第 5 著者 所属(和/英) NECソリューションイノベータ株式会社(略称:NECソリューションイノベータ)
NEC Solution Innovators(略称:NEC Solution Innovators)
発表年月日 2021-12-17
資料番号 PRMU2021-47
巻番号(vol) vol.121
号番号(no) PRMU-304
ページ範囲 pp.124-129(PRMU),
ページ数 6
発行日 2021-12-09 (PRMU)