講演名 1999/1/21
インターモーダル協調による映像メディアからのイベント抽出
笹森 重和, 馬場口 登, 北橋 忠宏,
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 本報告では, インターモーダル協調, つまり言語情報であるクローズドキャプションと画像情報とを利用した映像メディアからのイベント抽出法を提案する.ここではケーススタディとして, アメリカンフットボールの試合の映像を対象に, 試合の状態変化に関する情報を利用する.そして言語からは試合の階層構造の一部を抽出するとともに, 得点イベントと関わりの深い複数のキーワードを利用して得点のイベントに関して画像とクローズドキャプションとが対応しているかを同定する.同定された複数キーワードから画像と対応している範囲を求め, その範囲の画像列をショット分割し, 例画像と比較することでショットに対しインデクスを付ける.本研究ではアメリカンフットボール試合の映像に対してイベント抽出実験を行ない再現率・適合率に関して良好な結果を得た.
抄録(英) In this report, we propose a method for event extraction by linking between visual and linguistic(closed caption)streams. Using domain knowledge about state transitions of football games, we can recognize structure of game units by classified key words and identify some key words related to the event. According to the identified key words, we then decide a time window which is the range for searching images. The shots within the time window are indexed as an event by comparing them with example images which may have much relevance to the event. The experimental results indicate that the method is effective for event extraction.
キーワード(和) 映像インデキシング / 内容解析 / イベント抽出 / 意味内容に基づく検索 / クローズドキャプション
キーワード(英) video indexing / content analysis / event extraction / content-based retrieval / closed caption
資料番号 PRMU98-189
発行日

研究会情報
研究会 PRMU
開催期間 1999/1/21(から1日開催)
開催地(和)
開催地(英)
テーマ(和)
テーマ(英)
委員長氏名(和)
委員長氏名(英)
副委員長氏名(和)
副委員長氏名(英)
幹事氏名(和)
幹事氏名(英)
幹事補佐氏名(和)
幹事補佐氏名(英)

講演論文情報詳細
申込み研究会 Pattern Recognition and Media Understanding (PRMU)
本文の言語 JPN
タイトル(和) インターモーダル協調による映像メディアからのイベント抽出
サブタイトル(和)
タイトル(英) Event Extraction from Video by Intermodal Collaboration
サブタイトル(和)
キーワード(1)(和/英) 映像インデキシング / video indexing
キーワード(2)(和/英) 内容解析 / content analysis
キーワード(3)(和/英) イベント抽出 / event extraction
キーワード(4)(和/英) 意味内容に基づく検索 / content-based retrieval
キーワード(5)(和/英) クローズドキャプション / closed caption
第 1 著者 氏名(和/英) 笹森 重和 / Shigekazu SASAMORI
第 1 著者 所属(和/英) 大阪大学産業科学研究所
Institute of Scientific and Industrial Research, Osaka University
第 2 著者 氏名(和/英) 馬場口 登 / Noboru BABAGUCHI
第 2 著者 所属(和/英) 大阪大学産業科学研究所
Institute of Scientific and Industrial Research, Osaka University
第 3 著者 氏名(和/英) 北橋 忠宏 / Tadahiro KITAHASHI
第 3 著者 所属(和/英) 大阪大学産業科学研究所
Institute of Scientific and Industrial Research, Osaka University
発表年月日 1999/1/21
資料番号 PRMU98-189
巻番号(vol) vol.98
号番号(no) 527
ページ範囲 pp.-
ページ数 8
発行日