講演名 2018-03-18
Toward image inbetweening using Latent Model
パウリーノ クリストバオ(筑波大), 谷村 勇輔(産総研), 中田 秀基(産総研), 麻生 英樹(産総研),
PDFダウンロードページ PDFダウンロードページへ
抄録(和) Image interpolation is a well known problem in computer vision. Many approaches are restricted to optical flow and convolutional neural network. In this work, we present an alternative approach based on generative models to generate in between images (interpolation) using variational autoencoders (VAE). The goals are: Gener- ate in between images using hidden structures (latent variables), and yield latent features that generalize well. Our architecture composed of three networks (VAE) that share weights. We train the network feeding three continous frames so that the second latent variables become close to the average of the first and third latent variables. To get interporated image from two images, we can just reconstract the image from the avarage of the two images’ latent variables. We evaluate the result by comparing the ground truth image and the generated one to evaluate the in between image. In addition we show the reconstructed images using the same network.
抄録(英) Image interpolation is a well known problem in computer vision. Many approaches are restricted to optical flow and convolutional neural network. In this work, we present an alternative approach based on generative models to generate in between images (interpolation) using variational autoencoders (VAE). The goals are: Gener- ate in between images using hidden structures (latent variables), and yield latent features that generalize well. Our architecture composed of three networks (VAE) that share weights. We train the network feeding three continous frames so that the second latent variables become close to the average of the first and third latent variables. To get interporated image from two images, we can just reconstract the image from the avarage of the two images’ latent variables. We evaluate the result by comparing the ground truth image and the generated one to evaluate the in between image. In addition we show the reconstructed images using the same network.
キーワード(和) 変分オートエンコーダ / 機械学習 / ディープラーニング
キーワード(英) Variational Autoencoder / Machine Learning / Deep Learning
資料番号 BioX2017-49,PRMU2017-185
発行日 2018-03-11 (BioX, PRMU)

研究会情報
研究会 PRMU / BioX
開催期間 2018/3/18(から2日開催)
開催地(和) 青山学院大学 青山キャンパス
開催地(英)
テーマ(和) オープンイノベーション
テーマ(英)
委員長氏名(和) 佐藤 真一(NII) / 鷲見 和彦(青学大)
委員長氏名(英) Shinichi Sato(NII) / Kazuhiko Sumi(AGU)
副委員長氏名(和) 藤吉 弘亘(中部大) / 井尻 善久(オムロン) / 高野 博史(富山県立大) / 今岡 仁(NEC)
副委員長氏名(英) Hironobu Fujiyoshi(Chubu Univ.) / Yoshihisa Ijiri(Omron) / Hiroshi Takano(Toyama Pref. Univ.) / Hitoshi Imaoka(NEC)
幹事氏名(和) 大西 正輝(産総研) / 舩冨 卓哉(奈良先端大) / 大木 哲史(静岡大) / 青木 隆浩(富士通研)
幹事氏名(英) Masaki Oonishi(AIST) / Takuya Funatomi(NAIST) / Tetsushi Ohki(Shizuoka Univ.) / Takahiro Aoki(Fujitsu Labs.)
幹事補佐氏名(和) 石井 雅人(NEC) / 菅野 裕介(阪大) / 市野 将嗣(電通大) / 高田 直幸(セコム) / 奥井 宣広(KDDI総合研究所)
幹事補佐氏名(英) Masato Ishii(NEC) / Yusuke Sugano(Osaka Univ.) / Masatsugu Ichino(Univ. of Electro-Comm.) / Naoyuki Takada(Secom) / Norihiro Okui(KDDI Research)

講演論文情報詳細
申込み研究会 Technical Committee on Pattern Recognition and Media Understanding / Technical Committee on Biometrics
本文の言語 ENG
タイトル(和)
サブタイトル(和)
タイトル(英) Toward image inbetweening using Latent Model
サブタイトル(和)
キーワード(1)(和/英) 変分オートエンコーダ / Variational Autoencoder
キーワード(2)(和/英) 機械学習 / Machine Learning
キーワード(3)(和/英) ディープラーニング / Deep Learning
第 1 著者 氏名(和/英) パウリーノ クリストバオ / Paulino Cristovao
第 1 著者 所属(和/英) 筑波大学(略称:筑波大)
University of Tsukuba(略称:Univ. of Tsukuba)
第 2 著者 氏名(和/英) 谷村 勇輔 / Yusuke Tanimura
第 2 著者 所属(和/英) 産業技術総合研究所(略称:産総研)
National Institute of Advanced Industrial Science and Technology(略称:AIST)
第 3 著者 氏名(和/英) 中田 秀基 / Hidemoto Nakada
第 3 著者 所属(和/英) 産業技術総合研究所(略称:産総研)
National Institute of Advanced Industrial Science and Technology(略称:AIST)
第 4 著者 氏名(和/英) 麻生 英樹 / Hideki Asoh
第 4 著者 所属(和/英) 産業技術総合研究所(略称:産総研)
National Institute of Advanced Industrial Science and Technology(略称:AIST)
発表年月日 2018-03-18
資料番号 BioX2017-49,PRMU2017-185
巻番号(vol) vol.117
号番号(no) BioX-513,PRMU-514
ページ範囲 pp.79-84(BioX), pp.79-84(PRMU),
ページ数 6
発行日 2018-03-11 (BioX, PRMU)