| 講演名 | 2002/2/28 ズーム変化を含む動画中の顔自動トラッキングとマッチムーブによる表情合成 長田 誉弘, 大室 学, 緒方 信, 森島 繁生, |
|---|---|
| PDFダウンロードページ | PDFダウンロードページへ |
| 抄録(和) | 映画製作においては、手動のマッチムーブ処理によって、主人公の顔部分を別の人物に置き換える処理がしばしば行われるが、経験と時間を要する処理である。また、洋画の吹き替えにおいては、口形と音声の同期が取れず、しばしば、口の動きからせりふが制約を受ける場合もある。本稿では、映像中の人物の顔の位置と向きを自動的に推定し、顔の全体もしくは一部を置き換える手法を提案し、この問題点に対応する。顔のトラッキングには、3次元テンプレートを利用する手法を提案し、精度の高い推定を実現する。また、このトラッキング結果に基づいて画像中にワイヤフレームを当てはめ、顔を他の人物のものと置換したり、口の部分を入れ替えて、別の言葉を発声する映像に変換するシステムを提案する。 |
| 抄録(英) | In a special effect of movie creation, a manual match-moving can realize the replacement of the face in film with movie star, however, this process need a creator's experience and long time working. Also in stand-in system of foreign movie, lip synchronization is not achieved and sometimes spoken work is limited by mouth movement. In this paper, the location and angle of face are automatically estimated in video sequence and full face expression or mouth movement are replaced with new one. 3D face template is introduced to realize an accurate face tracking to realize automatic match-moving and stand-in system. |
| キーワード(和) | 顔トラッキング / 3次元顔テンプレート / 顔 / マッチムーブ / 表情合成 |
| キーワード(英) | Face Tracking / 3D Face Template / Face / Match-moving / Face Image Synthesis |
| 資料番号 | HCS2001-50 |
| 発行日 |
| 研究会情報 | |
| 研究会 | HCS |
|---|---|
| 開催期間 | 2002/2/28(から1日開催) |
| 開催地（和） | |
| 開催地（英） | |
| テーマ（和） | |
| テーマ（英） | |
| 委員長氏名（和） | |
| 委員長氏名（英） | |
| 副委員長氏名（和） | |
| 副委員長氏名（英） | |
| 幹事氏名（和） | |
| 幹事氏名（英） | |
| 幹事補佐氏名（和） | |
| 幹事補佐氏名（英） | |
| 講演論文情報詳細 | |
| 申込み研究会 | Human Communication Science (HCS) |
|---|---|
| 本文の言語 | JPN |
| タイトル（和） | ズーム変化を含む動画中の顔自動トラッキングとマッチムーブによる表情合成 |
| サブタイトル（和） | |
| タイトル（英） | Automatic Face Tracking in Video Sequence with Zoom Change and Face Image Synthesis by Match-moving |
| サブタイトル（和） | |
| キーワード(1)（和/英） | 顔トラッキング / Face Tracking |
| キーワード(2)（和/英） | 3次元顔テンプレート / 3D Face Template |
| キーワード(3)（和/英） | 顔 / Face |
| キーワード(4)（和/英） | マッチムーブ / Match-moving |
| キーワード(5)（和/英） | 表情合成 / Face Image Synthesis |
| 第 1 著者 氏名（和/英） | 長田 誉弘 / Takahiro OSADA |
| 第 1 著者 所属（和/英） | 成蹊大学工学部 Faculty of Engineering, SEIKEI University |
| 第 2 著者 氏名（和/英） | 大室 学 / Manabu OHMURO |
| 第 2 著者 所属（和/英） | 成蹊大学工学部 Faculty of Engineering, SEIKEI University |
| 第 3 著者 氏名（和/英） | 緒方 信 / Shin OGATA |
| 第 3 著者 所属（和/英） | 成蹊大学工学部 Faculty of Engineering, SEIKEI University |
| 第 4 著者 氏名（和/英） | 森島 繁生 / Shigeo MORISHIMA |
| 第 4 著者 所属（和/英） | 成蹊大学工学部 Faculty of Engineering, SEIKEI University |
| 発表年月日 | 2002/2/28 |
| 資料番号 | HCS2001-50 |
| 巻番号（vol） | vol.101 |
| 号番号（no） | 693 |
| ページ範囲 | pp.- |
| ページ数 | 8 |
| 発行日 | |