| 講演名 | 2023-01-19 [Short Paper] Multimodal Image Inpainting Using Camera Imagery and WiFi RSSI Cheng Chen(Tokyo Tech), Takayuki Nishio(Tokyo Tech), Mehdi Bennis(Oulu Univ.), Jihong Park(Deakin Univ.), |
|---|---|
| PDFダウンロードページ |  PDFダウンロードページへ |
| 抄録(和) | |
| 抄録(英) | This study demonstrates the feasibility of image inpainting using both visual information and radio frequency (RF) signals. Recent developments in imaging and vision-based technologies using RF signals have revealed the potential of leveraging multimodal information to enhance image inpainting performance. In this context, we propose RF-Inpainter---a novel inpainting method that integrates visual and wireless information by fusing defective RGB images with received signal strength indicator (RSSI) using a deep auto-encoder model. The inpainting performance of RF-Inpainter is evaluated using experimentally obtained images and RSSI datasets in an indoor environment. Image-only inpainting and RSSI-only inpainting models are used as baselines to illustrate the superiority of RF-Inpainter over inpainting methods based on a single modality. The results establish that RF-Inpainter generates satisfactory inpainted images in most experimental scenarios, achieving a maximum improvement of 36.4% and 14.6% in terms of mean peak signal-to-noise ratio (PSNR) and mean structural similarity index (SSIM), respectively. |
| キーワード(和) | Image inpainting / Multi-modal / WiFi sensing / Deep learning / RSSI fingerprint |
| キーワード(英) | Image inpainting / Multi-modal / WiFi sensing / Deep learning / RSSI fingerprint |
| 資料番号 | SeMI2022-83 |
| 発行日 | 2023-01-12 (SeMI) |
| 研究会情報 | |
| 研究会 | SeMI |
|---|---|
| 開催期間 | 2023/1/19(から2日開催) |
| 開催地（和） | 鳴門グランドホテル海月 |
| 開催地（英） | Naruto grand hotel |
| テーマ（和） | センシング，モビリティ，モバイル・ユビキタスコンピューティング，センサ・アドホック・モバイルネットワーク，アプリケーション，一般 |
| テーマ（英） | |
| 委員長氏名（和） | 山本 高至(京大) |
| 委員長氏名（英） | Koji Yamamoto(Kyoto Univ.) |
| 副委員長氏名（和） | 門田 和也(日立) / 大和田 泰伯(NICT) / 猿渡 俊介(阪大) |
| 副委員長氏名（英） | Kazuya Monden(Hitachi) / Yasunori Owada(NICT) / Shunsuke Saruwatari(Osaka Univ.) |
| 幹事氏名（和） | 勝間田 優樹(NTTドコモ) / 中山 悠(東京農工大) / 内山 彰(阪大) |
| 幹事氏名（英） | Yuki Katsumata(NTT DOCOMO) / Yu Nakayama(Tokyo Univ. of Agri. and Tech.) / Akira Uchiyama(Osaka Univ.) |
| 幹事補佐氏名（和） | 松田 裕貴(奈良先端大) / 田谷 昭仁(青学大) / 平井 健士(阪大) |
| 幹事補佐氏名（英） | Yuki Matsuda(NAIST) / Akihito Taya(Aoyama Gakuin Univ.) / Takeshi Hirai(Osaka Univ.) |
| 講演論文情報詳細 | |
| 申込み研究会 | Technical Committee on Sensor Network and Mobile Intelligence |
|---|---|
| 本文の言語 | ENG |
| タイトル（和） | |
| サブタイトル（和） | |
| タイトル（英） | [Short Paper] Multimodal Image Inpainting Using Camera Imagery and WiFi RSSI |
| サブタイトル（和） | |
| キーワード(1)（和/英） | Image inpainting / Image inpainting |
| キーワード(2)（和/英） | Multi-modal / Multi-modal |
| キーワード(3)（和/英） | WiFi sensing / WiFi sensing |
| キーワード(4)（和/英） | Deep learning / Deep learning |
| キーワード(5)（和/英） | RSSI fingerprint / RSSI fingerprint |
| 第 1 著者 氏名（和/英） | Cheng Chen / Cheng Chen |
| 第 1 著者 所属（和/英） | Tokyo Institute of Technology(略称：Tokyo Tech) Tokyo Institute of Technology(略称：Tokyo Tech) |
| 第 2 著者 氏名（和/英） | Takayuki Nishio / Takayuki Nishio |
| 第 2 著者 所属（和/英） | Tokyo Institute of Technology(略称：Tokyo Tech) Tokyo Institute of Technology(略称：Tokyo Tech) |
| 第 3 著者 氏名（和/英） | Mehdi Bennis / Mehdi Bennis |
| 第 3 著者 所属（和/英） | University of Oulu(略称：Oulu Univ.) University of Oulu(略称：Oulu Univ.) |
| 第 4 著者 氏名（和/英） | Jihong Park / Jihong Park |
| 第 4 著者 所属（和/英） | Deakin University(略称：Deakin Univ.) Deakin University(略称：Deakin Univ.) |
| 発表年月日 | 2023-01-19 |
| 資料番号 | SeMI2022-83 |
| 巻番号（vol） | vol.122 |
| 号番号（no） | SeMI-341 |
| ページ範囲 | pp.51-53(SeMI), |
| ページ数 | 3 |
| 発行日 | 2023-01-12 (SeMI) |