講演名 2000/3/21
顔空間クラスタリングの学習によるドラマ映像の登場人物のアノテーション手法
佐藤 真一,
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 本論文では, ドラマ映像における登場人物のアノテーションシステムについて述べる.ドラマ映像では人物の情報は大変重要であり、映像中の登場人物を抽出し, 識別することにより映像に人物によるアノテーションを付与できれば, ドラマ映像の内容検索などの高度なマルチメディアアプリケーションが実現可能となる.このアノテーションを品質良く付与するためには, 人手により行うのがもっとも良いが, 数時間にも及ぶ映像中の数百から数千もの顔シーケンスに対してすべて人手で名前づけを行うのは現実的とは言えない.そこで, ドラマシリーズ中の数十程度の顔についてのみ人手で名前を付与すれば, これをもとに顔と名前の対応関係を学習し, 他の顔については全自動で名前付けを行うシステムを開発した.要素技術として, 実際のドラマ映像にも適用可能な頑強な顔シーケンス抽出/照合手法を用いており, 実映像についても適切に動作する.実際のドラマ映像を用いた実験では, 40の顔シーケンスへの人手入力により, 全部で700近くの顔の70%程度が正しく名前付けられた.
抄録(英) This paper addresses to achieve an automated actor/actress annotation system for drama videos. Since face information is crucial in drama videos, extracting and identifying actors/actresses enables vaeious advanced multimedia applications such as a content-based video retrieval system. Manual annotation is ideal for high-quality drama video annotation, however, it is intractable to manually annotate thousands of face sequences of hours of drama videos. In order to circumvent this problem, semi-automated drama video annotation system is developed, which learns association of faces to names from only dozens of manually annotated face sequences and automatically annotates other face sequences. The system employs face sequence extraction and matching methods applicable to actual drama video as key technologies. Experimental results show that the system achieves around 70% accuracy in annotating about 700 face sequences using 40 manual annotations as the training set.
キーワード(和) 映像解析 / 映像インデクシング / パターン分析 / 顔認識
キーワード(英) Video analysis / Video indexing / Pattern classification / Face recognition
資料番号 AI99-93,KBSE99-52
発行日

研究会情報
研究会 KBSE
開催期間 2000/3/21(から1日開催)
開催地(和)
開催地(英)
テーマ(和)
テーマ(英)
委員長氏名(和)
委員長氏名(英)
副委員長氏名(和)
副委員長氏名(英)
幹事氏名(和)
幹事氏名(英)
幹事補佐氏名(和)
幹事補佐氏名(英)

講演論文情報詳細
申込み研究会 Knowledge-Based Software Engineering (KBSE)
本文の言語 JPN
タイトル(和) 顔空間クラスタリングの学習によるドラマ映像の登場人物のアノテーション手法
サブタイトル(和)
タイトル(英) Actor/Actress Annotation for Drama Videos Using Face Space Clustering
サブタイトル(和)
キーワード(1)(和/英) 映像解析 / Video analysis
キーワード(2)(和/英) 映像インデクシング / Video indexing
キーワード(3)(和/英) パターン分析 / Pattern classification
キーワード(4)(和/英) 顔認識 / Face recognition
第 1 著者 氏名(和/英) 佐藤 真一 / Shin'ichi Satoh
第 1 著者 所属(和/英) 学術情報センター
National Center for Science Information Systems(NACSIS)
発表年月日 2000/3/21
資料番号 AI99-93,KBSE99-52
巻番号(vol) vol.99
号番号(no) 719
ページ範囲 pp.-
ページ数 8
発行日