講演名 2010-01-21
多視点カメラ撮影による野球のシースルー映像生成(テーマセッション,クロスモーダル)
橋本 昂宗, 植松 裕子, 斎藤 英雄,
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 本論文では,多視点のカメラの映像を合成することにより,中央カメラに映る障害物を取り除くとともに,障害物に隠れていた物体を透視することで,シースルー映像を生成する手法を提案する.本手法を野球の試合映像に適用し,審判とキャッチャーに隠されたピッチャーの姿を透視した映像を生成する.本手法は,ピッチャーの合成,審判とキャッチャーの除去,ボール軌跡の可視化の処理から成る.ピッチャーの合成では,左右カメラにおけるピッチャー領域を,Homographyによって中央カメラ視点へ変換して合成する.審判とキャッチャーは,Graph cutを用いた領域検出によって除去する.ボール軌跡は,左右および中央カメラ間に成立するTrifocal Tensorを用いて中央カメラでのボール位置を推測することで可視化する.最後に,それぞれの処理によって生成された結果を領域ごとに合成することで,シースルー映像を生成する.実験では,球場にて撮影した多視点映像に本手法を適用し,障害物であるキャッチャーと審判を除去したシースルー映像を合成することができた.
抄録(英) This paper presents a generation method of see-through movie by merging multiple camera images and diminishing occluders from a middle camera. We apply this method for the movie of the baseball game and create the see-through movie of the pitcher by diminishing the catcher and the umpire. This method consists of "generating pitcher region", "diminishing umpire and catcher", and "visualizing trajectory of ball". In the generating pitcher region, the images of left and right cameras are transformed to the middle camera view by Homographies to merge them. The regions of umpire and catcher are diminished by Graph cut. The trajectory of the ball in the middle camera view is visualized by estimating the ball's position using Trifocal Tensor among the three cameras. By merging these results for each region, the see-through image is generated. In the experimental results, the see-through movie in which the catcher and the umpire ("occluders") are diminished is successfully generated.
キーワード(和) Diminished Reality / 野球映像 / シースルー映像 / 多視点カメラ / Homography / Augmented Reality
キーワード(英) Diminished Reality / Baseball game / see-through movie / multiple camera / Homography / Augmented Reality
資料番号 CQ2009-67,PRMU2009-166,SP2009-107,MVE2009-89
発行日

研究会情報
研究会 PRMU
開催期間 2010/1/14(から1日開催)
開催地(和)
開催地(英)
テーマ(和)
テーマ(英)
委員長氏名(和)
委員長氏名(英)
副委員長氏名(和)
副委員長氏名(英)
幹事氏名(和)
幹事氏名(英)
幹事補佐氏名(和)
幹事補佐氏名(英)

講演論文情報詳細
申込み研究会 Pattern Recognition and Media Understanding (PRMU)
本文の言語 JPN
タイトル(和) 多視点カメラ撮影による野球のシースルー映像生成(テーマセッション,クロスモーダル)
サブタイトル(和)
タイトル(英) Generation of See-Through Baseball Movie from Multi-Camera Views
サブタイトル(和)
キーワード(1)(和/英) Diminished Reality / Diminished Reality
キーワード(2)(和/英) 野球映像 / Baseball game
キーワード(3)(和/英) シースルー映像 / see-through movie
キーワード(4)(和/英) 多視点カメラ / multiple camera
キーワード(5)(和/英) Homography / Homography
キーワード(6)(和/英) Augmented Reality / Augmented Reality
第 1 著者 氏名(和/英) 橋本 昂宗 / Takanori HASHIMOTO
第 1 著者 所属(和/英) 慶應義塾大学理工学部
Keio University
第 2 著者 氏名(和/英) 植松 裕子 / Yuko UEMATSU
第 2 著者 所属(和/英) 慶應義塾大学理工学部
Keio University
第 3 著者 氏名(和/英) 斎藤 英雄 / Hideo SAITO
第 3 著者 所属(和/英) 慶應義塾大学理工学部
Keio University
発表年月日 2010-01-21
資料番号 CQ2009-67,PRMU2009-166,SP2009-107,MVE2009-89
巻番号(vol) vol.109
号番号(no) 374
ページ範囲 pp.-
ページ数 6
発行日