| 講演名 | 2001/3/15 3次元個人顔モデルを用いたビデオ映像中の顔の自動トラッキング及びモデルマッチムーブ処理 三澤 貴文, 村井 和昌, 中村 哲, 森島 繁生, |
|---|---|
| PDFダウンロードページ | PDFダウンロードページへ |
| 抄録(和) | 近年の著しい技術進歩により、携帯情報端末で動画像を送受信したり、音声翻訳システムを介して海外の人々と母国語で会話ができる時代もそう遠くはなく、音声のみならず画像も翻訳できれば会話がより自然なものになると思われる。この画像翻訳の実現には、映像中の人物顔を正確にトラッキングする技術が必要となる。顔のトラッキングは多くの研究者により研究されてきたが、その多くが顔の特徴点を追うものであり、特徴点のフレーム間でのブレや顔の回転による特徴点の隠れなどの問題が残されていた。そこで本論文では画像翻訳の核となる技術として、3次元個人モデルを用いたテンプレートマッチングによる顔のトラッキング手法を提案した。そして、評価実験により、ある軸での角度の平均誤差が約0.28°という結果を得た。この結果は、提案した手法が効果的な方法であることを示すものである。 |
| 抄録(英) | Videophone with automatic voice translation are expected to be widely used in the near future, which may race the problem without lip-synchronized speaking face image translation. In this paper, we propose a method to track motion of the face from the video image, that is one of the key technologies for speaking image translation. Almost all the old tracking algorithms aim to detect feature points of the face. However, these algorithms had problems, such as blurring of a feature point between frames and occlusion of the hidden feature point by rotation of the head, and so on. we propose a method which detects movement and rotation of the head given the 3D shape of the face, by template matching using a 3D personal face wire-frame model. The evaluation experiments are carried out with the measured reference data of the head. The proposed method achieves 0.28 angle error in average. This result confirms effectiveness of the proposed method. |
| キーワード(和) | 画像翻訳 / 3次元個人モデル / テンプレートマッチング / 自動顔トラッキング |
| キーワード(英) | Image translation / 3D personal model / Template matching / Automatic face tracking |
| 資料番号 | MVE2000-112 |
| 発行日 |
| 研究会情報 | |
| 研究会 | MVE |
|---|---|
| 開催期間 | 2001/3/15(から1日開催) |
| 開催地（和） | |
| 開催地（英） | |
| テーマ（和） | |
| テーマ（英） | |
| 委員長氏名（和） | |
| 委員長氏名（英） | |
| 副委員長氏名（和） | |
| 副委員長氏名（英） | |
| 幹事氏名（和） | |
| 幹事氏名（英） | |
| 幹事補佐氏名（和） | |
| 幹事補佐氏名（英） | |
| 講演論文情報詳細 | |
| 申込み研究会 | Media Experience and Virtual Environment (MVE) |
|---|---|
| 本文の言語 | JPN |
| タイトル（和） | 3次元個人顔モデルを用いたビデオ映像中の顔の自動トラッキング及びモデルマッチムーブ処理 |
| サブタイトル（和） | |
| タイトル（英） | AUTOMATIC FACE TRACKING AND MODEL MATCH-MOVE PROCESSING IN VIDEO SEQUENCE USING 3D PERSONAL FACE MODEL |
| サブタイトル（和） | |
| キーワード(1)（和/英） | 画像翻訳 / Image translation |
| キーワード(2)（和/英） | 3次元個人モデル / 3D personal model |
| キーワード(3)（和/英） | テンプレートマッチング / Template matching |
| キーワード(4)（和/英） | 自動顔トラッキング / Automatic face tracking |
| 第 1 著者 氏名（和/英） | 三澤 貴文 / Takafumi Misawa |
| 第 1 著者 所属（和/英） | 成蹊大学工学部:ATR音声言語通信研究所 Faculty of Engineering, Seikei University:ATR, Spoken Language Translation Research Laboratories |
| 第 2 著者 氏名（和/英） | 村井 和昌 / Kazumasa Murai |
| 第 2 著者 所属（和/英） | ATR音声言語通信研究所 ATR, Spoken Language Translation Research Laboratories |
| 第 3 著者 氏名（和/英） | 中村 哲 / Satoshi Nakamura |
| 第 3 著者 所属（和/英） | ATR音声言語通信研究所 ATR, Spoken Language Translation Research Laboratories |
| 第 4 著者 氏名（和/英） | 森島 繁生 / Shigeo Morishima |
| 第 4 著者 所属（和/英） | 成蹊大学工学部 Faculty of Engineering, Seikei University |
| 発表年月日 | 2001/3/15 |
| 資料番号 | MVE2000-112 |
| 巻番号（vol） | vol.100 |
| 号番号（no） | 716 |
| ページ範囲 | pp.- |
| ページ数 | 8 |
| 発行日 | |