| 講演名 | 2022-12-15 Non-local operator及び周波数領域の特徴マップを用いた単一画像からの雨粒除去 江角 真也(慶大), 池原 雅章(慶大), |
|---|---|
| PDFダウンロードページ |  PDFダウンロードページへ |
| 抄録(和) | 自動雨粒除去は見た目の良い画像を得るだけでなく，屋外画像の画像処理精度の向上にも有用である．従来法では広範囲での一貫性確保に失敗し不自然な模様がみられたことから，提案手法はNon-local operator を採用した．ここでは特徴マップ同士の積をとることによって離れた場所の特徴類似度を取り込んでいる．加えてエッジなどの高周波数成分をより精密に復元するため，周波数領域の特徴マップに対する処理を採用した．提案手法ではFFT によって周波数領域の特徴マップを生成，畳み込み層により処理を行った．以上により従来手法に比べ定量的により正確な雨粒除去を可能にしたほか，定性的にも処理画像の不自然な模様や細部の復元に対して改善がみられた． |
| 抄録(英) | High-quality raindrop removal is desired for outdoor image processing systems as well as for acquiring good-looking images. Existing methods often fail to keep global consistency and generate unnatural patterns. In this paper, we tackle this problem by introducing the non-local operator. The non-local operator combines features in distant locations with matrix multiplication and enables consistency in distant locations. In addition, we also propose to process feature maps in the frequency domain for more precise inpainting of high frequency components such as edges. Feature maps in the frequency domain are obtained by the FFT operation and processed by several convolution layers. Experimental results show that our method effectively removes raindrops and achieves state-of-the-art performance. |
| キーワード(和) | 深層学習 / 画像修復 / 雨粒除去 / Non-local Neural Network / 高速フーリエ変換 |
| キーワード(英) | Deep Learning / Image Restoration / Raindrop Removal / Non-local Neural Network / Fast Fourier Transform |
| 資料番号 | PRMU2022-34 |
| 発行日 | 2022-12-08 (PRMU) |
| 研究会情報 | |
| 研究会 | PRMU |
|---|---|
| 開催期間 | 2022/12/15(から2日開催) |
| 開催地（和） | 富山国際会議場 |
| 開催地（英） | Toyama International Conference Center |
| テーマ（和） | 制御のためのCV |
| テーマ（英） | |
| 委員長氏名（和） | 内田 誠一(九大) |
| 委員長氏名（英） | Seiichi Uchida(Kyushu Univ.) |
| 副委員長氏名（和） | 舩冨 卓哉(奈良先端大) / 安倍 満(デンソーアイティーラボラトリ) |
| 副委員長氏名（英） | Takuya Funatomi(NAIST) / Mitsuru Anpai(Denso IT Lab.) |
| 幹事氏名（和） | 山口 光太(サイバーエージェント) / 松井 勇佑(東大) |
| 幹事氏名（英） | Kouta Yamaguchi(CyberAgent) / Yusuke Matsui(Univ. of Tokyo) |
| 幹事補佐氏名（和） | 井上 中順(東工大) / 川西 康友(理研) |
| 幹事補佐氏名（英） | Nakamasa Inoue(Tokyo Inst. of Tech.) / Yasutomo Kawanishi(Riken) |
| 講演論文情報詳細 | |
| 申込み研究会 | Technical Committee on Pattern Recognition and Media Understanding |
|---|---|
| 本文の言語 | ENG-JTITLE |
| タイトル（和） | Non-local operator及び周波数領域の特徴マップを用いた単一画像からの雨粒除去 |
| サブタイトル（和） | |
| タイトル（英） | Single Image Raindrop Removal Using a Non-local Operator and Feature Maps in the Frequency Domain |
| サブタイトル（和） | |
| キーワード(1)（和/英） | 深層学習 / Deep Learning |
| キーワード(2)（和/英） | 画像修復 / Image Restoration |
| キーワード(3)（和/英） | 雨粒除去 / Raindrop Removal |
| キーワード(4)（和/英） | Non-local Neural Network / Non-local Neural Network |
| キーワード(5)（和/英） | 高速フーリエ変換 / Fast Fourier Transform |
| 第 1 著者 氏名（和/英） | 江角 真也 / Shinya Ezumi |
| 第 1 著者 所属（和/英） | 慶応義塾大学(略称：慶大) Keio University(略称：Keio Univ.) |
| 第 2 著者 氏名（和/英） | 池原 雅章 / Masaaki Ikehara |
| 第 2 著者 所属（和/英） | 慶応義塾大学(略称：慶大) Keio University(略称：Keio Univ.) |
| 発表年月日 | 2022-12-15 |
| 資料番号 | PRMU2022-34 |
| 巻番号（vol） | vol.122 |
| 号番号（no） | PRMU-314 |
| ページ範囲 | pp.13-18(PRMU), |
| ページ数 | 6 |
| 発行日 | 2022-12-08 (PRMU) |