| 講演名 | 2022-03-10 パーツ毎の画像変換と歪み補正モデルに基づく動作クローン映像生成 山下 雅弘(阪大), 中村 和晃(東京理科大), 新田 直子(阪大), 馬場口 登(阪大), |
|---|---|
| PDFダウンロードページ |  PDFダウンロードページへ |
| 抄録(和) | 本稿では，ある人物Xの動作映像（リファレンス映像）1本と，別の人物Yの静止画像（ターゲット画像）小数枚のみを入力として，人物Xの動作をあたかも人物Yが再現しているかのような映像（動作クローン映像）を生成する手法を提案する．単一のターゲット画像を変形する事で動作クローン映像を生成する従来手法では，回転を伴う動作といった元々のターゲット画像に写っていない部位のテクスチャを生成する必要があるケースには原理的に対処できない，という問題がある．提案手法では，人物の身体を複数の部位に分け，部位ごとに異なる2次元アフィン変換を用いて画像を変形する従来手法を複数枚のターゲット画像に用いる事により，複数の動作クローン映像を生成する．その後，生成した動作クローン映像を3種類のサブネットワークから構成される歪み補正モデルにより統合する事で対処する．実験の結果，提案手法により，回転を伴う動作に対して，一定程度の品質で動作クローン映像を生成できる事を確認した． |
| 抄録(英) | |
| キーワード(和) | リファレンス映像 / ターゲット画像 / 動作クローン映像 / 2次元アフィン変換 / 3種類のサブネットワーク |
| キーワード(英) | |
| 資料番号 | IMQ2021-48,IE2021-110,MVE2021-77 |
| 発行日 | 2022-03-02 (IMQ, IE, MVE) |
| 研究会情報 | |
| 研究会 | CQ / IMQ / MVE / IE |
|---|---|
| 開催期間 | 2022/3/9(から3日開催) |
| 開催地（和） | オンライン開催（Zoom） |
| 開催地（英） | Online (Zoom) |
| テーマ（和） | 変化する生活での五感に訴えるオンラインメディアとその評価、および一般（魅力工学研究会協賛） |
| テーマ（英） | Media of five senses, Multimedia, Media experience, Picture codinge, Image media quality, Network,quality and reliability, etc |
| 委員長氏名（和） | 岡本 淳(NTT) / 魚森 謙也(阪大) / 井原 雅行(理研) / 児玉 和也(NII) |
| 委員長氏名（英） | Jun Okamoto(NTT) / Kenya Uomori(Osaka Univ.) / Masayuki Ihara(RIKEN) / Kazuya Kodama(NII) |
| 副委員長氏名（和） | 平栗 健史(日本工大) / 長谷川 剛(東北大) / 前田 充(キヤノン) / 清川 清(奈良先端大) / 坂東 幸浩(NTT) / 山崎 俊彦(東大) |
| 副委員長氏名（英） | Takefumi Hiraguri(Nippon Inst. of Tech.) / Gou Hasegawa(Tohoku Univ.) / Mitsuru Maeda(Canon) / Kiyoshi Kiyokawa(NAIST) / Hiroyuki Bandoh(NTT) / Toshihiko Yamazaki(Univ. of Tokyo) |
| 幹事氏名（和） | アベセカラ ヒランタ(NTT) / 山本 寛(立命館大) / 工藤 博章(名大) / 土田 勝(NTT) / 西口 敏司(阪工大) / 横山 正典(NTT) / 福嶋 政期(東大) / 海野 恭平(KDDI総合研究所) / 福嶋 慶繁(名工大) |
| 幹事氏名（英） | Hirantha Abeysekera(NTT) / Hiroshi Yamamoto(Ritsumeikan Univ.) / Hiroaki Kudo(Nagoya Univ.) / Masaru Tsuchida(NTT) / Satoshi Nishiguchi(Oosaka Inst. of Tech.) / Masanori Yokoyama(NTT) / Shogo Fukushima(Univ. of ToKyo) / Kyohei Unno(KDDI Research) / Norishige Fukushima(Nagoya Inst. of Tech.) |
| 幹事補佐氏名（和） | 西川 由明(NEC) / 堅岡 良知(KDDI総合研究所) / 川嶋 喜美子(NTT) / 塚田 正人(NEC) / 山添 崇(成蹊大) / 磯山 直也(奈良先端大) / 原 豪紀(大日本印刷) / 後藤 充裕(NTT) / 岩村 俊輔(NHK) / 工藤 忍(NTT) |
| 幹事補佐氏名（英） | Yoshiaki Nishikawa(NEC) / Ryoichi Kataoka(KDDI Research) / Kimiko Kawashima(NTT) / Masato Tsukada(NEC) / Takashi Yamazoe(Seikei Univ.) / Naoya Isoyama(NAIST) / Takenori Hara(DNP) / Mitsuhiro Goto(NTT) / Shunsuke Iwamura(NHK) / Shinobu Kudo(NTT) |
| 講演論文情報詳細 | |
| 申込み研究会 | Technical Committee on Communication Quality / Technical Committee on Image Media Quality / Technical Committee on Media Experience and Virtual Environment / Technical Committee on Image Engineering |
|---|---|
| 本文の言語 | JPN |
| タイトル（和） | パーツ毎の画像変換と歪み補正モデルに基づく動作クローン映像生成 |
| サブタイトル（和） | |
| タイトル（英） | Generating Motion Video Clones based on Part-wise Image Warping with Distortion Refinement Model |
| サブタイトル（和） | |
| キーワード(1)（和/英） | リファレンス映像 |
| キーワード(2)（和/英） | ターゲット画像 |
| キーワード(3)（和/英） | 動作クローン映像 |
| キーワード(4)（和/英） | 2次元アフィン変換 |
| キーワード(5)（和/英） | 3種類のサブネットワーク |
| 第 1 著者 氏名（和/英） | 山下 雅弘 / Masahiro Yamashita |
| 第 1 著者 所属（和/英） | 大阪大学(略称：阪大) Osaka University(略称：Osaka Univ.) |
| 第 2 著者 氏名（和/英） | 中村 和晃 / Kazuaki Nakamura |
| 第 2 著者 所属（和/英） | 東京理科大学(略称：東京理科大) Tokyo University of Science(略称：Tokyo Univ.) |
| 第 3 著者 氏名（和/英） | 新田 直子 / Naoko Nitta |
| 第 3 著者 所属（和/英） | 大阪大学(略称：阪大) Osaka University(略称：Osaka Univ.) |
| 第 4 著者 氏名（和/英） | 馬場口 登 / Noboru Babaguchi |
| 第 4 著者 所属（和/英） | 大阪大学(略称：阪大) Osaka University(略称：Osaka Univ.) |
| 発表年月日 | 2022-03-10 |
| 資料番号 | IMQ2021-48,IE2021-110,MVE2021-77 |
| 巻番号（vol） | vol.121 |
| 号番号（no） | IMQ-420,IE-422,MVE-423 |
| ページ範囲 | pp.199-204(IMQ), pp.199-204(IE), pp.199-204(MVE), |
| ページ数 | 6 |
| 発行日 | 2022-03-02 (IMQ, IE, MVE) |