講演名 1996/5/17
テレビドラマに対する注釈付加システム
林 和宏, 吉川 晃平, 川嶋 稔夫, 青木 由直,
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 本稿では、実際のテレビドラマに対して字幕等の注釈を自動的かつリアルタイムに付加するシステムについて述べる。このシステムではあらかじめ注釈を付加したシナリオとビデオ信号とを同期させ、対応する注釈をTV上に出力する。シナリオとビデオ信号間の同期はシナリオから抽出した音素列とビデオ信号中の音声とのDPマッチングにより行う。このマッチングはBGM存在下でも良好に動作をする。また、その検証には、画像と音声の情報、すなわち、カットチェンジの情報及びシナリオと直接対応しない部分における音声の情報を用いて行う。また、このシステムの中核となる処理を実際のテレビドラマを対象として実験を行い、良好な動作が確認された。
抄録(英) In this paper we propose an automatic video captioning system for TV dramas. The system superimposes texts for annotation to the picture by parsing the video of TV drama along its senario. The first step of the video-senario synchronization is sound-matching. Phoneme sequences extracted from the senario is matched with the sounds in the video under the existence of background music. The second step is senario-based verification. Mismatchings are corrected by verifying the senario to voices and cut-changes in the video. The core programs were tested for a part of a TV-drama, and showed good results.
キーワード(和) ビデオアノテーション / シナリオ / 字幕 / スポッティング
キーワード(英) Video Annotaiton / Senario / Caption / Spotting
資料番号 PRMU96-16
発行日

研究会情報
研究会 PRMU
開催期間 1996/5/17(から1日開催)
開催地(和)
開催地(英)
テーマ(和)
テーマ(英)
委員長氏名(和)
委員長氏名(英)
副委員長氏名(和)
副委員長氏名(英)
幹事氏名(和)
幹事氏名(英)
幹事補佐氏名(和)
幹事補佐氏名(英)

講演論文情報詳細
申込み研究会 Pattern Recognition and Media Understanding (PRMU)
本文の言語 JPN
タイトル(和) テレビドラマに対する注釈付加システム
サブタイトル(和)
タイトル(英) Automatic Video Captioning System for TV-Dramas
サブタイトル(和)
キーワード(1)(和/英) ビデオアノテーション / Video Annotaiton
キーワード(2)(和/英) シナリオ / Senario
キーワード(3)(和/英) 字幕 / Caption
キーワード(4)(和/英) スポッティング / Spotting
第 1 著者 氏名(和/英) 林 和宏 / Kazuhiro Hayashi
第 1 著者 所属(和/英) 北海道大学工学部
Faculty of Engineering, Hokkaido University
第 2 著者 氏名(和/英) 吉川 晃平 / Kouhei Yoshikawa
第 2 著者 所属(和/英) 北海道大学工学部
Faculty of Engineering, Hokkaido University
第 3 著者 氏名(和/英) 川嶋 稔夫 / Toshio Kawashima
第 3 著者 所属(和/英) 北海道大学工学部
Faculty of Engineering, Hokkaido University
第 4 著者 氏名(和/英) 青木 由直 / Yoshinao Aoki
第 4 著者 所属(和/英) 北海道大学工学部
Faculty of Engineering, Hokkaido University
発表年月日 1996/5/17
資料番号 PRMU96-16
巻番号(vol) vol.96
号番号(no) 41
ページ範囲 pp.-
ページ数 6
発行日