| 講演名 | 2019-03-07 2種類の情報をもつ動画像を用いたフレーム補間におけるグローバルモーション補償の精度向上に向けた検討 浮橋 慶太(立命館大), 今川 隆司(立命館大), 筒井 弘(北大), 宮永 喜一(北大), 越智 裕之(立命館大), |
|---|---|
| PDFダウンロードページ |  PDFダウンロードページへ |
| 抄録(和) | 無線通信のような限られた通信帯域内での高品位な動画像伝送を実現する手法として，フレーム補間がある．フレーム補間においては，動画像を取得するカメラ側ではフレームレートや解像度を落とたうえで伝送し，受信した側で動き補償などを行うことで高解像度・高フレームレートな動画像を生成する．高品質なフレーム補間手法として，2種類の解像度・フレームレートをもつ動画像からの補間フレーム生成手法が提案されている．しかしこの手法には，背景と前景の分離が輝度差に依存しているという問題がある．本稿ではこれに対し，背景と前景の分離にFgSegNetと呼ばれるニューラルネットワークを用いたが，これにより既存手法では顕在化していなかったグローバルモーション補償の精度低下が問題となった．そこで，本稿では，この問題に対して，ホモグラフィ変換の失敗の検知や特徴点の除去や補間を行うことで，補間フレームの品質を向上させる手法を提案する．また，従来の手法で用いられる画素値の重ね合わせモデルの問題点を明らかにし，新たな重ね合わせモデルを提案する． |
| 抄録(英) | Frame interpolation is a method to realize wireless transmission of high frame-rate and high-resolution video in a sensor network whose transmission rate is strictly limited. A frame interpolation method is a technology that improves the frame rate by inserting interpolated frames with compensating for global and local motion. A frame interpolation method has been proposed which uses video stream that has two types of information; high-resolution video and high-frame-rate video. This method, however, sometimes creates low-quality interpolation frames when the luminance of foreground and background are similar and when the local motion is small as compared with global motion. We introduce FgSegNet in the existing procedure to improve the quality of foreground segmentation, but it also degrades the quality of global motion compensation. In this report, we propose some methods to detect failures of homography transformation and to eliminate/compensate feature points for improving the quality of global motion compensation. We also propose a new pixel blending method to improve the quality of interpolated frames. |
| キーワード(和) | フレーム補間 / 動き補償 |
| キーワード(英) | frame interpolation / motion compensation |
| 資料番号 | SIS2018-47 |
| 発行日 | 2019-02-27 (SIS) |
| 研究会情報 | |
| 研究会 | SIS |
|---|---|
| 開催期間 | 2019/3/6(から2日開催) |
| 開催地（和） | 東京理科大学葛飾キャンパス |
| 開催地（英） | Tokyo Univ. Science, Katsushika Campus |
| テーマ（和） | ソフトコンピューティング,一般 |
| テーマ（英） | Soft Computing, etc. |
| 委員長氏名（和） | 仲地 孝之(NTT) |
| 委員長氏名（英） | Takayuki Nakachi(NTT) |
| 副委員長氏名（和） | 末竹 規哲(山口大) / 木村 誠聡(神奈川工科大) |
| 副委員長氏名（英） | Noriaki Suetake(Yamaguchi Univ.) / Tomoaki Kimura(Kanagawa Inst. of Tech.) |
| 幹事氏名（和） | 田向 権(九工大) / 藤吉 正明(首都大東京) |
| 幹事氏名（英） | Hakaru Tamukoh(Kyushu Inst. of Tech.) / Masaaki Fujiyoshi(Tokyo Metropolitan Univ.) |
| 幹事補佐氏名（和） | 古賀 崇了(徳山高専) / 三澤 秀明(宇部高専) |
| 幹事補佐氏名（英） | Takanori Koga(National Inst. of Tech. Tokuyama College) / Hideaki Misawa(National Inst. of Tech., Ube College) |
| 講演論文情報詳細 | |
| 申込み研究会 | Technical Committee on Smart Info-Media Systems |
|---|---|
| 本文の言語 | JPN |
| タイトル（和） | 2種類の情報をもつ動画像を用いたフレーム補間におけるグローバルモーション補償の精度向上に向けた検討 |
| サブタイトル（和） | |
| タイトル（英） | A Study of Global Motion Compensation for Frame Interpolation with High-Resolution and High-Frame Rate Video |
| サブタイトル（和） | |
| キーワード(1)（和/英） | フレーム補間 / frame interpolation |
| キーワード(2)（和/英） | 動き補償 / motion compensation |
| 第 1 著者 氏名（和/英） | 浮橋 慶太 / Keita Ukihashi |
| 第 1 著者 所属（和/英） | 立命館大学(略称：立命館大) Ritsumeikan University(略称：Ritsumeikan Univ.) |
| 第 2 著者 氏名（和/英） | 今川 隆司 / Takashi Imagawa |
| 第 2 著者 所属（和/英） | 立命館大学(略称：立命館大) Ritsumeikan University(略称：Ritsumeikan Univ.) |
| 第 3 著者 氏名（和/英） | 筒井 弘 / Hiroshi Tsutsui |
| 第 3 著者 所属（和/英） | 北海道大学(略称：北大) Hokkaido University(略称：Hokkaido Univ.) |
| 第 4 著者 氏名（和/英） | 宮永 喜一 / Yoshikazu Miyanaga |
| 第 4 著者 所属（和/英） | 北海道大学(略称：北大) Hokkaido University(略称：Hokkaido Univ.) |
| 第 5 著者 氏名（和/英） | 越智 裕之 / Hiroyuki Ochi |
| 第 5 著者 所属（和/英） | 立命館大学(略称：立命館大) Ritsumeikan University(略称：Ritsumeikan Univ.) |
| 発表年月日 | 2019-03-07 |
| 資料番号 | SIS2018-47 |
| 巻番号（vol） | vol.118 |
| 号番号（no） | SIS-473 |
| ページ範囲 | pp.53-58(SIS), |
| ページ数 | 6 |
| 発行日 | 2019-02-27 (SIS) |