| 講演名 | 2021-03-05 Learning from Synthetic Shadows 井上 直人(東大), 山崎 俊彦(東大), |
|---|---|
| PDFダウンロードページ |  PDFダウンロードページへ |
| 抄録(和) | |
| 抄録(英) | Shadow removal is essential for some downstream tasks in computer vision and computer graphics. Recent shadow removal approaches all train convolutional neural networks (CNN) on real paired shadow/shadow-free/mask image datasets. However, obtaining a large-scale, diverse, and accurate dataset has been a primary challenge. It limits the generalization performance of the learned models on shadow images with unseen shapes/intensities. We present SynShadow, a novel large-scale synthetic shadow/shadow-free/matte image triplets dataset and a pipeline to synthesize it to tackle this challenge. We extend a physically-grounded shadow illumination model and synthesize a shadow image given an arbitrary combination of a shadow-free image, a matte image, and shadow attenuation parameters. This pipeline enables us to sample a countless number of the triplets. SynShadow offers a dataset with high fidelity and diversity. We demonstrate that shadow removal models trained on SynShadow perform favorably in removing shadows with various shapes and intensities. Furthermore, we show that simply fine-tuning from a SynShadow-pre-trained model improves existing shadow detection and removal models. |
| キーワード(和) | |
| キーワード(英) | shadow removalshadow detectionCNN |
| 資料番号 | PRMU2020-92 |
| 発行日 | 2021-02-25 (PRMU) |
| 研究会情報 | |
| 研究会 | PRMU / IPSJ-CVIM |
|---|---|
| 開催期間 | 2021/3/4(から2日開催) |
| 開催地（和） | オンライン開催 |
| 開催地（英） | Online |
| テーマ（和） | 特殊な環境下におけるCV・ パターン認識 |
| テーマ（英） | Computer Vision and Pattern Recognition for specific environment |
| 委員長氏名（和） | 佐藤 洋一(東大) |
| 委員長氏名（英） | Yoichi Sato(Univ. of Tokyo) |
| 副委員長氏名（和） | 木村 昭悟(NTT) / 岩村 雅一(阪府大) |
| 副委員長氏名（英） | Akisato Kimura(NTT) / Masakazu Iwamura(Osaka Pref. Univ.) |
| 幹事氏名（和） | 内田 祐介(Mobility Technologies) / 山下 隆義(中部大) |
| 幹事氏名（英） | Yusuke Uchida(Mobility Technologies) / Takayoshi Yamashita(Chubu Univ.) |
| 幹事補佐氏名（和） | 柴田 剛志(NTT) / 西山 正志(鳥取大) |
| 幹事補佐氏名（英） | Takashi Shibata(NTT) / Masashi Nishiyama(Tottori Univ.) |
| 講演論文情報詳細 | |
| 申込み研究会 | Technical Committee on Pattern Recognition and Media Understanding / Special Interest Group on Computer Vision and Image Media |
|---|---|
| 本文の言語 | ENG |
| タイトル（和） | |
| サブタイトル（和） | |
| タイトル（英） | Learning from Synthetic Shadows |
| サブタイトル（和） | |
| キーワード(1)（和/英） | / shadow removalshadow detectionCNN |
| 第 1 著者 氏名（和/英） | 井上 直人 / Naoto Inoue |
| 第 1 著者 所属（和/英） | 東京大学(略称：東大) The University of Tokyo(略称：UTokyo) |
| 第 2 著者 氏名（和/英） | 山崎 俊彦 / Toshihiko Yamasaki |
| 第 2 著者 所属（和/英） | 東京大学(略称：東大) The University of Tokyo(略称：UTokyo) |
| 発表年月日 | 2021-03-05 |
| 資料番号 | PRMU2020-92 |
| 巻番号（vol） | vol.120 |
| 号番号（no） | PRMU-409 |
| ページ範囲 | pp.133-138(PRMU), |
| ページ数 | 6 |
| 発行日 | 2021-02-25 (PRMU) |