| 電子情報通信学会 研究会発表申込システム 講演論文 詳細 |
技報閲覧サービス [ログイン] 技報アーカイブ |
| トップに戻る | 前のページに戻る | [Japanese] / [English] |
| 講演抄録／キーワード | ||
| 講演名 | 2020-12-17 10:15 実顔画像ドメインを経由したアニメ風話者頭部映像の合成 ○藤内 俊・八馬 遼・長谷川邦洋・斎藤英雄（慶大）  PRMU2020-39 |
|
| 抄録 | （和） | アバターは，顔の動作や表情等の非言語情報を匿名性を保ちながら伝達するために，インターネットを介したコミュニケーションにおいて広く利用されている．本研究では，このようなアバターによる非言語コミュニケーションにおいて，より正確に実際の話者の表情や動作を再現できるようにするための方法として，単一のイラスト（アニメ風顔画像）とユーザが話している映像（話者頭部映像）を入力として，アニメ風顔画像をユーザの頭部と同じように喋らせた映像（アニメ風話者頭部映像）の合成を行う手法を提案する．本手法はアニメ風顔画像と実世界の話者の頭部映像を入力として，入力アニメ風顔画像を入力頭部映像と同じように動かしたときに得られるアニメ風話者頭部映像を生成するというものである．本手法の有効性を検証するために，提案手法による生成結果の定性評価実験に加え，ベースライン手法としてFirst Order Motion Modelを用いた生成結果との比較実験結果を示す． |
| （英） | Avatars are widely used on the Internet to establish non-verbal communication without exposing one's physical identity. In order to accomplish effective avatar-based communication, it is important that avatars reflect user's facial expression precisely. In this work, we propose a method to drive a single anime-face image by user's talking-heads video to synthesize talking anime-heads images. Our method takes an anime-like face image and a real-world speaker's head image as input, and generates an anime-like speaker's head image when the input anime-like face image is moved in the same way as the input head image. In order to validate the effectiveness of the proposed method, we present the results of qualitative evaluation experiments of the generation results of the proposed method and quantitative comparison with the generation results using the First Order Motion Model as a baseline method. | |
| キーワード | （和） | Image Animation / Image-to-Image Translation / アニメ風顔画像 / データセット正規化 / / / / |
| （英） | Image Animation / Image-to-Image Translation / anime-like face image / dataset normalization / / / / | |
| 文献情報 | 信学技報, vol. 120, no. 300, PRMU2020-39, pp. 7-11, 2020年12月. | |
| 資料番号 | PRMU2020-39 | |
| 発行日 | 2020-12-10 (PRMU) | |
| ISSN | Online edition: ISSN 2432-6380 | |
| 著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します．(許諾番号：10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) | |
| PDFダウンロード | PRMU2020-39 |
|
| 研究会情報 | |
| 研究会 | PRMU |
| 開催期間 | 2020-12-17 - 2020-12-18 |
| 開催地（和） | オンライン開催 |
| 開催地（英） | Online |
| テーマ（和） | 転移学習・少数データからの学習 |
| テーマ（英） | Transfer learning and few shot learning |
| 講演論文情報の詳細 | |
| 申込み研究会 | PRMU |
| 会議コード | 2020-12-PRMU |
| 本文の言語 | 日本語 |
| タイトル（和） | 実顔画像ドメインを経由したアニメ風話者頭部映像の合成 |
| サブタイトル（和） | |
| タイトル（英） | Synthesize talking anime-heads images by tunneling through human-heads domain |
| サブタイトル（英） | |
| キーワード(1)（和/英） | Image Animation / Image Animation |
| キーワード(2)（和/英） | Image-to-Image Translation / Image-to-Image Translation |
| キーワード(3)（和/英） | アニメ風顔画像 / anime-like face image |
| キーワード(4)（和/英） | データセット正規化 / dataset normalization |
| キーワード(5)（和/英） | / |
| キーワード(6)（和/英） | / |
| キーワード(7)（和/英） | / |
| キーワード(8)（和/英） | / |
| 第1著者 氏名（和/英/ヨミ） | 藤内 俊 / Shun Fujiuchi / フジウチ シュン |
| 第1著者 所属（和/英） | 慶應義塾大学 (略称： 慶大) Keio University (略称： Keio Univ.) |
| 第2著者 氏名（和/英/ヨミ） | 八馬 遼 / Ryo Hachiuma / ハチウマ リョウ |
| 第2著者 所属（和/英） | 慶應義塾大学 (略称： 慶大) Keio University (略称： Keio Univ.) |
| 第3著者 氏名（和/英/ヨミ） | 長谷川 邦洋 / Kunihiro Hasegawa / ハセガワ クニヒロ |
| 第3著者 所属（和/英） | 慶應義塾大学 (略称： 慶大) Keio University (略称： Keio Univ.) |
| 第4著者 氏名（和/英/ヨミ） | 斎藤 英雄 / Hideo Saito / サイトウ ヒデオ |
| 第4著者 所属（和/英） | 慶應義塾大学 (略称： 慶大) Keio University (略称： Keio Univ.) |
| 第5著者 氏名（和/英/ヨミ） | / / |
| 第5著者 所属（和/英） | (略称： ) (略称： ) |
| 第6著者 氏名（和/英/ヨミ） | / / |
| 第6著者 所属（和/英） | (略称： ) (略称： ) |
| 第7著者 氏名（和/英/ヨミ） | / / |
| 第7著者 所属（和/英） | (略称： ) (略称： ) |
| 第8著者 氏名（和/英/ヨミ） | / / |
| 第8著者 所属（和/英） | (略称： ) (略称： ) |
| 第9著者 氏名（和/英/ヨミ） | / / |
| 第9著者 所属（和/英） | (略称： ) (略称： ) |
| 第10著者 氏名（和/英/ヨミ） | / / |
| 第10著者 所属（和/英） | (略称： ) (略称： ) |
| 第11著者 氏名（和/英/ヨミ） | / / |
| 第11著者 所属（和/英） | (略称： ) (略称： ) |
| 第12著者 氏名（和/英/ヨミ） | / / |
| 第12著者 所属（和/英） | (略称： ) (略称： ) |
| 第13著者 氏名（和/英/ヨミ） | / / |
| 第13著者 所属（和/英） | (略称： ) (略称： ) |
| 第14著者 氏名（和/英/ヨミ） | / / |
| 第14著者 所属（和/英） | (略称： ) (略称： ) |
| 第15著者 氏名（和/英/ヨミ） | / / |
| 第15著者 所属（和/英） | (略称： ) (略称： ) |
| 第16著者 氏名（和/英/ヨミ） | / / |
| 第16著者 所属（和/英） | (略称： ) (略称： ) |
| 第17著者 氏名（和/英/ヨミ） | / / |
| 第17著者 所属（和/英） | (略称： ) (略称： ) |
| 第18著者 氏名（和/英/ヨミ） | / / |
| 第18著者 所属（和/英） | (略称： ) (略称： ) |
| 講演者 | 第1著者 |
| 発表日時 | 2020-12-17 10:15:00 |
| 発表時間 | 15分 |
| 申込先研究会 | PRMU |
| 資料番号 | PRMU2020-39 |
| 巻番号（vol） | vol.120 |
| 号番号（no） | no.300 |
| ページ範囲 | pp.7-11 |
| ページ数 | 5 |
| 発行日 | 2020-12-10 (PRMU) |
[研究会発表申込システムのトップページに戻る]