講演名 2009-03-13
全方位動画像の欠損修復による不可視領域のない全天球映像の生成(一般セッション1,コンピュータビジョンとパターン認識のための学習理論)
町北 幸大郎, 河合 紀彦, 佐藤 智和, 横矢 直和,
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 本報告では,全方位動画像上において全方位カメラの死角により生じる欠損領域を修復し,臨場感の高いテレプレゼンスを実現する手法を提案する.本研究では,欠損領域周辺における撮影対象の形状とカメラの運動を考慮し,テクスチャの変形補正および,事例として用いる画像領域の限定を行うことで高品位な修復を行う.具体的には,全方位カメラの死角領域周辺の形状が平面で近似できると仮定し,Structure from motion法によって得られた点群に当てはめた平面に対して全方位画像を投影し,同一物体の見え方の変化を補償する.また,全方位カメラの位置・姿勢および作成した平面を用いて,欠損領域のテクスチャが他フレームの画像上で存在する領域を限定し,実際には存在しないテクスチャの生成を防ぐ.実験では,移動しながら全方位カメラにより撮影された動画像の欠損を修復し,不可視領域のない全天球映像を生成することで,提案手法の有効性を示す.
抄録(英) Omnidirectional cameras cannot usually capture the entire direction of view due to the blind side. Thus, such an invisible part decreases realistic sensation in the telepresence system. In this study, an omnidirectional video without invisible area is generated by filling a missing region using an image inpainting technique for high realistic sensation in telepresence. This report proposes a new method that successfully inpaints a missing region by compensating the texture's distortion and limiting the searched area considering the camera motion and the shape of the scene around the missing region. The quality of the inpainted image is improved by limiting the seaching area using the estimated plane and camera motion. In the experiment, the effectiveness of the proposed method is demonstrated by inpainting missing regions in a real image sequence captured with an omnidirectional camera and generating an omnidirectional video without invisible area.
キーワード(和) 画像修復 / 全方位動画像 / テレプレゼンス
キーワード(英) inpainting / ominidirectional image / telepresence
資料番号 PRMU2008-245
発行日

研究会情報
研究会 PRMU
開催期間 2009/3/6(から1日開催)
開催地(和)
開催地(英)
テーマ(和)
テーマ(英)
委員長氏名(和)
委員長氏名(英)
副委員長氏名(和)
副委員長氏名(英)
幹事氏名(和)
幹事氏名(英)
幹事補佐氏名(和)
幹事補佐氏名(英)

講演論文情報詳細
申込み研究会 Pattern Recognition and Media Understanding (PRMU)
本文の言語 JPN
タイトル(和) 全方位動画像の欠損修復による不可視領域のない全天球映像の生成(一般セッション1,コンピュータビジョンとパターン認識のための学習理論)
サブタイトル(和)
タイトル(英) Generation of Omnidirectional Video Without Invisible Area Based on Image Inpainting
サブタイトル(和)
キーワード(1)(和/英) 画像修復 / inpainting
キーワード(2)(和/英) 全方位動画像 / ominidirectional image
キーワード(3)(和/英) テレプレゼンス / telepresence
第 1 著者 氏名(和/英) 町北 幸大郎 / Kotaro MACHIKITA
第 1 著者 所属(和/英) 奈良先端科学技術大学院大学情報科学研究科
Graduate School of Information Science, Nara Institute of Science and Technology
第 2 著者 氏名(和/英) 河合 紀彦 / Norihiko KAWAI
第 2 著者 所属(和/英) 奈良先端科学技術大学院大学情報科学研究科
Graduate School of Information Science, Nara Institute of Science and Technology
第 3 著者 氏名(和/英) 佐藤 智和 / Tamokazu SATO
第 3 著者 所属(和/英) 奈良先端科学技術大学院大学情報科学研究科
Graduate School of Information Science, Nara Institute of Science and Technology
第 4 著者 氏名(和/英) 横矢 直和 / Naokazu YOKOYA
第 4 著者 所属(和/英) 奈良先端科学技術大学院大学情報科学研究科
Graduate School of Information Science, Nara Institute of Science and Technology
発表年月日 2009-03-13
資料番号 PRMU2008-245
巻番号(vol) vol.108
号番号(no) 484
ページ範囲 pp.-
ページ数 6
発行日