| 講演名 | 2020-03-16 Temporal Action Proposalからのモーメント・文章間マッチング 山田 直歩(慶大), 林 昌希(慶大), 笠井 誠斗(慶大), 青木 義満(慶大), |
|---|---|
| PDFダウンロードページ |  PDFダウンロードページへ |
| 抄録(和) | 昨今，Vision and Languageの分野は幅広い応用へつながる非常に注目度の高い研究課題になってきている．そのひとつとして，動画中に現れる内容と自然言語で表される内容の対応づけを行い，より詳細な場面の認識を実現可能にするVideo Grounding using Natural Languageが挙げられる．本研究では日常的な場面を対象とした動画において，Video Grounding using Natural Languageによるアプローチで動画内から文章で指定された場面を検出するTemporal Moment Localizationのタスクに取り組んだ． 1ステージに既存のTemporal Action Proposalを利用し，2ステージにVideo Grounding using Natural Languageによるアプローチで最適な時間領域を決定するランキング問題として解決するproposal and rankな2ステージ型のモデルを提案する． |
| 抄録(英) | |
| キーワード(和) | Temporal Moment Localization / Temporal Action Proposal / Video Grounding using Natural Language |
| キーワード(英) | |
| 資料番号 | PRMU2019-69 |
| 発行日 | 2020-03-09 (PRMU) |
| 研究会情報 | |
| 研究会 | PRMU / IPSJ-CVIM |
|---|---|
| 開催期間 | 2020/3/16(から2日開催) |
| 開催地（和） | 京都大学 |
| 開催地（英） | |
| テーマ（和） | 安全安心、セキュリティ・防災 |
| テーマ（英） | |
| 委員長氏名（和） | 佐藤 洋一(東大) |
| 委員長氏名（英） | Yoichi Sato(Univ. of Tokyo) |
| 副委員長氏名（和） | 玉木 徹(広島大) / 木村 昭悟(NTT) |
| 副委員長氏名（英） | Toru Tamaki(Hiroshima Univ.) / Akisato Kimura(NTT) |
| 幹事氏名（和） | 入江 豪(NTT) / 牛久 祥孝(オムロンサイニックエックス) |
| 幹事氏名（英） | Go Irie(NTT) / Yoshitaka Ushiku(OMRON SINICX) |
| 幹事補佐氏名（和） | 内田 祐介(DeNA) / 山下 隆義(中部大) |
| 幹事補佐氏名（英） | Yusuke Uchida(DeNA) / Takayoshi Yamashita(Chubu Univ.) |
| 講演論文情報詳細 | |
| 申込み研究会 | Technical Committee on Pattern Recognition and Media Understanding / Special Interest Group on Computer Vision and Image Media |
|---|---|
| 本文の言語 | JPN |
| タイトル（和） | Temporal Action Proposalからのモーメント・文章間マッチング |
| サブタイトル（和） | |
| タイトル（英） | Moment-Sentence Grounding from Temporal Action Proposal |
| サブタイトル（和） | |
| キーワード(1)（和/英） | Temporal Moment Localization |
| キーワード(2)（和/英） | Temporal Action Proposal |
| キーワード(3)（和/英） | Video Grounding using Natural Language |
| 第 1 著者 氏名（和/英） | 山田 直歩 / Nao Yamada |
| 第 1 著者 所属（和/英） | 慶應義塾大学(略称：慶大) Keio University(略称：Keio Univ.) |
| 第 2 著者 氏名（和/英） | 林 昌希 / Masaki Hayashi |
| 第 2 著者 所属（和/英） | 慶應義塾大学(略称：慶大) Keio University(略称：Keio Univ.) |
| 第 3 著者 氏名（和/英） | 笠井 誠斗 / Seito Kasai |
| 第 3 著者 所属（和/英） | 慶應義塾大学(略称：慶大) Keio University(略称：Keio Univ.) |
| 第 4 著者 氏名（和/英） | 青木 義満 / Yoshimitsu Aoki |
| 第 4 著者 所属（和/英） | 慶應義塾大学(略称：慶大) Keio University(略称：Keio Univ.) |
| 発表年月日 | 2020-03-16 |
| 資料番号 | PRMU2019-69 |
| 巻番号（vol） | vol.119 |
| 号番号（no） | PRMU-481 |
| ページ範囲 | pp.21-26(PRMU), |
| ページ数 | 6 |
| 発行日 | 2020-03-09 (PRMU) |