講演名 2013-03-11
映像合成のためのRGB画像からの3次元復元結果とDepth画像との比較による光源方向推定法に関する研究(一般,メディア・コミュニケーションの品質と福祉,及び一般)
林田 智樹, 高橋 昌平, 奥屋 武志, 大谷 淳, 川村 春美,
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 本論文は、撮像対象シーンの光源方向の推定を,Kinectセンサー等により獲得されるRGB画像とDepth画像から行う方法を提案する。本提案手法は、RGB画像から得られる濃淡画像を、Deep is dark paradigmに基づくKhanらの式を利用して距離画像に変換し、その距離画像に含まれる物体が光源方向に歪む性質を利用する。即ち、前述のようにして得られた距離画像とDepth画像とを画素ごとに比較して差分値を求めるとともに、その画素の法線ベクトルの方向をDepth画像より計算する。法線ベクトルの方向を表す2つの角度パラメータにより張られる2次元パラメータ平面において、各画素の法線ベクトルの方向に対応するcellに、その画素の差分値を加算する。全画素についてこの処理を行った後、パラメータ平面のピーク値に基づき光源を推定する。数種類の物体を対象に光源位置を変えて実験を行った結果、良好な光源推定が行える見通しを得た。
抄録(英) This paper proposes a method for estimating the light source direction from RGB image and Depth image (K-D image), which can be acquired by Kinect sensor etc. The proposed method utilizes the property that the 3D reconstructed result, which is obtained by converting the RGB image to gray-level image and then converting that gray-level image to depth image (D-D image) by Khan et al. 's method based on "Deep is dark paradigm", is deformed to the light source direction. The value difference at each pixel of the D-D image and K-D image is obtained, and that pixel's surface normal is computed from the K-D image. In the 2D space defined by the two angle parameters that represent the surface normal's direction, each pixel's difiFerence is added to the cell that corresponds to that pixel's normal's direction. After this process is performed for all the pixels, the light source direction is determined based on the peak in the parameter space. Experiments using some diflferent objects under different light source directions were performed. Promising results were obtained.
キーワード(和) 光源推定 / 三次元復元 / 拡張現実 / 映像合成
キーワード(英) Light Estimation / 3D Reconstruction / Augmented reality / image compisition
資料番号 IMQ2012-60,IE2012-164,MVE2012-121,WIT2012-70
発行日

研究会情報
研究会 MVE
開催期間 2013/3/4(から1日開催)
開催地(和)
開催地(英)
テーマ(和)
テーマ(英)
委員長氏名(和)
委員長氏名(英)
副委員長氏名(和)
副委員長氏名(英)
幹事氏名(和)
幹事氏名(英)
幹事補佐氏名(和)
幹事補佐氏名(英)

講演論文情報詳細
申込み研究会 Media Experience and Virtual Environment (MVE)
本文の言語 JPN
タイトル(和) 映像合成のためのRGB画像からの3次元復元結果とDepth画像との比較による光源方向推定法に関する研究(一般,メディア・コミュニケーションの品質と福祉,及び一般)
サブタイトル(和)
タイトル(英) Fundamental Study of Estimating the Light Source Position by Comparing the 3D Reconstruction Obtained from RGB Image with Depth Image
サブタイトル(和)
キーワード(1)(和/英) 光源推定 / Light Estimation
キーワード(2)(和/英) 三次元復元 / 3D Reconstruction
キーワード(3)(和/英) 拡張現実 / Augmented reality
キーワード(4)(和/英) 映像合成 / image compisition
第 1 著者 氏名(和/英) 林田 智樹 / Tomoki Hayashida
第 1 著者 所属(和/英) 早稲田大学基幹理工学部表現工学科
School of Fundamental Science and Engineering, Waseda Univ.
第 2 著者 氏名(和/英) 高橋 昌平 / Shohei Takahashi
第 2 著者 所属(和/英) 早稲田大学国際情報通信研究科
Graduate School of Global Inatformion and Telecommunication Studies, Waseda University
第 3 著者 氏名(和/英) 奥屋 武志 / Takeshi Okuya
第 3 著者 所属(和/英) 早稲田大学基幹理工学研究科表現工学専攻
Graduate School of Fundamental Science and Engineering, Waseda University
第 4 著者 氏名(和/英) 大谷 淳 / Jun Ohya
第 4 著者 所属(和/英) 早稲田大学国際情報通信研究科
Graduate School of Global Inatformion and Telecommunication Studies, Waseda University
第 5 著者 氏名(和/英) 川村 春美 / Harumi Kawamura
第 5 著者 所属(和/英) NTTメディアインテリジェンス研究所
NTT Media Intelligence Laboratories
発表年月日 2013-03-11
資料番号 IMQ2012-60,IE2012-164,MVE2012-121,WIT2012-70
巻番号(vol) vol.112
号番号(no) 474
ページ範囲 pp.-
ページ数 6
発行日