| 講演名 | 1998/1/22 発話情報と動作情報を用いたプレゼンテーション映像の要約 木村 善文, 余 曄, 中村 裕一, 大田 友一, |
|---|---|
| PDFダウンロードページ | PDFダウンロードページへ |
| 抄録(和) | 本稿では, プレゼンテーション映像を題材とし, 発話の言語情報と動作情報を利用した映像生成, 要約手法を提案する. 映像の生成, 要約を行う際に焦点となるのは, 冗長性の高い映像の中から注目度の高いセグメントを選択することである. 本研究では, 発話中の指示詞, 動詞等に注目度のスコアを与え, これと動作情報を組合せて注目度の高いセグメントを選択する. 本手法を実際のプレゼンテーション映像に適用し, 有効性について検討した結果を云す. |
| 抄録(英) | This paper introduces a novel method for presentation video generation and summarization, which uses language information taken from the speech and the speaker's motion. This method mainly deals with detecting "focus segments" which should be paid attention, and summarizes a video by those relevant segments. For this purpose, it utilizes deictic expressions, typical verbs, along with motion information, by giving scores to them based on the statistics over presentation videos of more than two hours. We applied this method to real presentation videos, and evaluated its effectiveness. |
| キーワード(和) | 映像生成 / 映像要約 / マルチモーダル処理 / プレゼンテーション映像処理 / 動作処理と発話処理の統合 |
| キーワード(英) | video generation / video analysis / multimodal analysis / presentation video analysis / integration of motion and speech analysis |
| 資料番号 | PRMU97-197 |
| 発行日 |
| 研究会情報 | |
| 研究会 | PRMU |
|---|---|
| 開催期間 | 1998/1/22(から1日開催) |
| 開催地（和） | |
| 開催地（英） | |
| テーマ（和） | |
| テーマ（英） | |
| 委員長氏名（和） | |
| 委員長氏名（英） | |
| 副委員長氏名（和） | |
| 副委員長氏名（英） | |
| 幹事氏名（和） | |
| 幹事氏名（英） | |
| 幹事補佐氏名（和） | |
| 幹事補佐氏名（英） | |
| 講演論文情報詳細 | |
| 申込み研究会 | Pattern Recognition and Media Understanding (PRMU) |
|---|---|
| 本文の言語 | JPN |
| タイトル（和） | 発話情報と動作情報を用いたプレゼンテーション映像の要約 |
| サブタイトル（和） | |
| タイトル（英） | Video Generation and Summarization by Utilizing Speech and Motion Analysis |
| サブタイトル（和） | |
| キーワード(1)（和/英） | 映像生成 / video generation |
| キーワード(2)（和/英） | 映像要約 / video analysis |
| キーワード(3)（和/英） | マルチモーダル処理 / multimodal analysis |
| キーワード(4)（和/英） | プレゼンテーション映像処理 / presentation video analysis |
| キーワード(5)（和/英） | 動作処理と発話処理の統合 / integration of motion and speech analysis |
| 第 1 著者 氏名（和/英） | 木村 善文 / Yoshifumi KIMURA |
| 第 1 著者 所属（和/英） | 筑波大学電子情報工学系 Institute of Information Sciences and Electronics, University of Tsukuba |
| 第 2 著者 氏名（和/英） | 余 曄 / Ye YU |
| 第 2 著者 所属（和/英） | 筑波大学電子情報工学系 Institute of Information Sciences and Electronics, University of Tsukuba |
| 第 3 著者 氏名（和/英） | 中村 裕一 / Yuichi NAKAMURA |
| 第 3 著者 所属（和/英） | 筑波大学電子情報工学系 Institute of Information Sciences and Electronics, University of Tsukuba |
| 第 4 著者 氏名（和/英） | 大田 友一 / Yuichi OHTA |
| 第 4 著者 所属（和/英） | 筑波大学電子情報工学系 Institute of Information Sciences and Electronics, University of Tsukuba |
| 発表年月日 | 1998/1/22 |
| 資料番号 | PRMU97-197 |
| 巻番号（vol） | vol.97 |
| 号番号（no） | 500 |
| ページ範囲 | pp.- |
| ページ数 | 8 |
| 発行日 | |