| 講演名 | 2024-01-26 大規模3Dメタデータによる撮影スポット探索機の学習 早瀬 友裕(クラスター研), Sacha Braun(L'X), 折登 樹(クラスター), |
|---|---|
| PDFダウンロードページ |  PDFダウンロードページへ |
| 抄録(和) | インターネットに接続された持続的な3DCG空間とその利用者の増加は, 深層学習においてまだ十分に活用されていない新たな学習用データセットを提供する可能性を秘めている.本研究では, マルチプレイヤーオンラインVRプラットフォームにおける3DCGシーンの理解と利用に焦点を当てる.これらのプラットフォームでは, ユーザーが3DCGシーンを作成し, 共有し, 操作することが可能であり, シーン内での写真撮影は一つの重要な活動である.この研究の目的は, 3DCG空間内の撮影スポットの質を向上させ, より良いシーン製作を支援することである. 本研究では, 視覚に基づく撮影スポットの予測を行うための評価関数の学習と, 三次元木構造探索を用いた撮影スポット探索機を提案する.評価関数の学習には, カメラ撮影のメタデータを使用し, 行動データが不足しているシーンにおいても予測を行う.研究の主な貢献は以下の通りである.まず, ユーザーが撮影した写真からアバターを除外したデータセットを作成し, これを用いて深層回路の学習を行った.次に, このデータセットに適したデータ拡張手法を特定し, 人間の判定との相関を確認した.最後に, 学習済みの深層回路を評価関数として使用し, 三次元階層的ブラックボックス探索の提案と解析を行った. このアルゴリズムは,未知のシーンにおいても効率的に探索を行い, 質の高い撮影スポットを発見した. |
| 抄録(英) | |
| キーワード(和) | HOO / ブラックボックス最適化 / 階層的探索 / 画像評価機 / Vision Transformer / 3DCG / VR |
| キーワード(英) | |
| 資料番号 | PRMU2023-50 |
| 発行日 | 2024-01-18 (PRMU) |
| 研究会情報 | |
| 研究会 | PRMU / MVE / VRSJ-SIG-MR / IPSJ-CVIM |
|---|---|
| 開催期間 | 2024/1/25(から2日開催) |
| 開催地（和） | 慶應義塾大学 日吉キャンパス(来往舎) |
| 開催地（英） | Keio Univ. (Hiyoshi Campus) |
| テーマ（和） | メタバースと深層学習 |
| テーマ（英） | |
| 委員長氏名（和） | 柏野 邦夫(NTT) / 清川 清(奈良先端大) / / 日浦 慎作(兵庫県立大) |
| 委員長氏名（英） | Kunio Kashio(NTT) / Kiyoshi Kiyokawa(NAIST) / / 日浦 慎作(兵庫県立大) |
| 副委員長氏名（和） | 舩冨 卓哉(奈良先端大) / 入江 豪(東京理科大) / 新井田 統(KDDI総合研究所) |
| 副委員長氏名（英） | Takuya Funatomi(NAIST) / Go Irie(Tokyo Univ. of Science) / Sumaru Niida(KDDI Research) |
| 幹事氏名（和） | 井上 中順(東工大) / 川西 康友(理研) / 磯山 直也(大妻女子大) / 原 豪紀(大日本印刷) / 福嶋 政期(九大) / 後藤 充裕(NTT) / / 出口 大輔(名古屋大) / 高橋 康輔(ウミトロン株式会社) / 田中 賢一郎(立命館大) / 波部 斉(近畿大) / 槇原 靖(大阪大) / 浦西 友樹(大阪大) |
| 幹事氏名（英） | Nakamasa Inoue(Tokyo Inst. of Tech.) / Yasutomo Kawanishi(Riken) / Naoya Isoyama(Otsuma Women's University) / Takenori Hara(DNP) / Shogo Fukushima(Kyushu Univ.) / Mitsuhiro Goto(NTT) / / 出口 大輔(名古屋大) / 高橋 康輔(ウミトロン株式会社) / 田中 賢一郎(立命館大) / 波部 斉(近畿大) / 槇原 靖(大阪大) / 浦西 友樹(大阪大) |
| 幹事補佐氏名（和） | 下西 慶(京大) / 原 健翔(産総研) / 宍戸 英彦(創価大) / 中澤 篤志(京大) / 東條 直也(KDDI総合研究所) / 萩山 直紀(NTT) / 畑田 裕二(東大) |
| 幹事補佐氏名（英） | Kei Shimonishi(Kyoto Univ.) / Kensho Hara(AIST) / Hidehiko Shishido(Soka University) / Atsushi Nakazawa(Kyoto Univ.) / Naoya Tojo(KDDI Research) / Naoki Hagiyama(NTT) / Yuji Tatada(Univ. of Tokyo) |
| 講演論文情報詳細 | |
| 申込み研究会 | Technical Committee on Pattern Recognition and Media Understanding / Technical Committee on Media Experience and Virtual Environment / SIG-MR / Special Interest Group on Computer Vision and Image Media |
|---|---|
| 本文の言語 | JPN-ONLY |
| タイトル（和） | 大規模3Dメタデータによる撮影スポット探索機の学習 |
| サブタイトル（和） | |
| タイトル（英） | |
| サブタイトル（和） | |
| キーワード(1)（和/英） | HOO |
| キーワード(2)（和/英） | ブラックボックス最適化 |
| キーワード(3)（和/英） | 階層的探索 |
| キーワード(4)（和/英） | 画像評価機 |
| キーワード(5)（和/英） | Vision Transformer |
| キーワード(6)（和/英） | 3DCG |
| キーワード(7)（和/英） | VR |
| 第 1 著者 氏名（和/英） | 早瀬 友裕 / Tomohiro Hayase |
| 第 1 著者 所属（和/英） | クラスターメタバース研究所(略称：クラスター研) Cluster Metaverse Lab(略称：CMVL) |
| 第 2 著者 氏名（和/英） | Sacha Braun / Sacha Braun |
| 第 2 著者 所属（和/英） | エコール ポリテクニーク(略称：L'X) Ecole polytechnique(略称：L'X) |
| 第 3 著者 氏名（和/英） | 折登 樹 / Itsuki Orito |
| 第 3 著者 所属（和/英） | クラスター(略称：クラスター) Cluster(略称：Cluster) |
| 発表年月日 | 2024-01-26 |
| 資料番号 | PRMU2023-50 |
| 巻番号（vol） | vol.123 |
| 号番号（no） | PRMU-358 |
| ページ範囲 | pp.56-61(PRMU), |
| ページ数 | 6 |
| 発行日 | 2024-01-18 (PRMU) |