講演名 2010-03-16
視点位置に依存して変形する三次元メッシュモデルを利用した自由視点画像生成における違和感の低減(一般,顔・人物・ジェスチャ・行動)
伊吹 拓也, 佐藤 智和, 松下 康之, 横矢 直和,
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 本報告では,近年盛んに研究されている実写画像に基づく自由視点画像生成において,合成画像上に生じる違和感を低減する手法を提案する.従来提案されているHybrid Rendering法では,幾何学的な整合性のみを考慮した画像合成を行うため,入力として用いられる幾何情報の精度が十分でない場合,テクスチャの不連続な変形や位置ずれに起因する歪みが生じていた.提案手法では,幾何学的な整合性に加えて,幾何モデルの時間的・空間的な連続性およびテクスチャの幾何学的・光学的な連続性を考慮した自由視点画像生成を行うことで,合成画像上に生じる歪みの低減を図る.実験では全方位マルチカメラによって実環境を撮影した全方位動画像を入力として用い,生成した自由視点画像を従来手法と比較することで,提案手法の有効性を示す.
抄録(英) This report describes a method to reduce unnatural artifacts when producing free viewpoint images by a deformable 3-D mesh model. Hybrid rendering methods that have been proposed in the past mostly used only the geometric consistency. Therefore, discontinuous transformation and misalignment of textures have been still quite visible in generated images. In this report, in order to reduce the unnatural artifacts in generated images, we use not only the geometric consistency but also smoothness constraints on both spatial and temporal mesh deformations. Additionally, discontinuities in textures are avoided by improving the strategy of texture selection for each patch in 3-D model. The effectiveness of the proposed method is demonstrated by comparing with previous method using various scenes.
キーワード(和) 自由視点画像生成 / 全方位動画像 / 奥行き画像
キーワード(英) Novel view generation / Omni-directional video / Depth map
資料番号 PRMU2009-307,HIP2009-192
発行日

研究会情報
研究会 PRMU
開催期間 2010/3/8(から1日開催)
開催地(和)
開催地(英)
テーマ(和)
テーマ(英)
委員長氏名(和)
委員長氏名(英)
副委員長氏名(和)
副委員長氏名(英)
幹事氏名(和)
幹事氏名(英)
幹事補佐氏名(和)
幹事補佐氏名(英)

講演論文情報詳細
申込み研究会 Pattern Recognition and Media Understanding (PRMU)
本文の言語 JPN
タイトル(和) 視点位置に依存して変形する三次元メッシュモデルを利用した自由視点画像生成における違和感の低減(一般,顔・人物・ジェスチャ・行動)
サブタイトル(和)
タイトル(英) Reduction of Unnatural Feeling in Free-viewpoint Rendering Using View-Dependent Deformable 3-D Mesh Model
サブタイトル(和)
キーワード(1)(和/英) 自由視点画像生成 / Novel view generation
キーワード(2)(和/英) 全方位動画像 / Omni-directional video
キーワード(3)(和/英) 奥行き画像 / Depth map
第 1 著者 氏名(和/英) 伊吹 拓也 / Takuya IBUKI
第 1 著者 所属(和/英) 奈良先端科学技術大学院大学情報科学研究科
Graduate School of Information Science, Nara Institute of Science and Technology
第 2 著者 氏名(和/英) 佐藤 智和 / Tomokazu SATO
第 2 著者 所属(和/英) 奈良先端科学技術大学院大学情報科学研究科:MSR IJARC Fellow
Graduate School of Information Science, Nara Institute of Science and Technology:MSR IJARC Fellow
第 3 著者 氏名(和/英) 松下 康之 / Yasuyuki MATSUSHITA
第 3 著者 所属(和/英) マイクロソフトリサーチアジア
Microsoft Research Asia
第 4 著者 氏名(和/英) 横矢 直和 / Naokazu YOKOYA
第 4 著者 所属(和/英) 奈良先端科学技術大学院大学情報科学研究科
Graduate School of Information Science, Nara Institute of Science and Technology
発表年月日 2010-03-16
資料番号 PRMU2009-307,HIP2009-192
巻番号(vol) vol.109
号番号(no) 470
ページ範囲 pp.-
ページ数 6
発行日