| 電子情報通信学会 研究会発表申込システム 講演論文 詳細 |
技報閲覧サービス [ログイン] 技報アーカイブ |
| トップに戻る | 前のページに戻る | [Japanese] / [English] |
| 講演抄録／キーワード | ||
| 講演名 | 2022-03-11 14:45 UMAとMCDの組み合わせによる一人称視点動画におけるハンドセグメンテーション ○鈴木健一・井上勝文・吉岡理文（阪府大）  PRMU2021-83 |
|
| 抄録 | （和） | 一人称視点動画におけるドメインシフトは，学習データと異なる環境下の撮影時に，画像全体の外観の変化から生じやすく，ハンドセグメンテーションモデルの性能低下を招く． この問題に対して，既存手法であるUMAは教師なしドメイン適応によって手領域特徴を自己学習することで精度を確保している． しかし，自己学習時に，ピクセルに対して誤った疑似ラベルが付与された場合の補正機能がなく，精度改善の余地がある． そこで本研究では，誤った疑似ラベル付与を防ぐために，敵対的学習によってドメイン適応するMCDをUMAに導入し，ハンドセグメンテーション性能の向上を図る． 具体的には，手の疑似ラベルマスクのもととなる確率マップに関して，分類器によるドメイン予測の不一致に着目する． この不一致を用いた教師なしドメイン適応を行い，ターゲットデータの各ピクセルが手領域に含まれるかどうかを精度良く分類することで，誤った疑似ラベルの原因となる確率マップの生成を抑制する． 公共データセットを用いた実験で，提案手法はUMAより，平均で約3.8%の精度向上を達成した． |
| （英） | Domain shift in the egocentric video analysis is caused by the difference between shooting environment of training and that of testing, and it deteriorates the hand segmentation performance. To solve this problem, to keep the performance, UMA utilizes the self-training technique with unsupervised domain adaptation to learn the feature of hand region, i.e., UMA utilizes the pseudo labels assigned to pixels during self-training to lessen the influences of domain shift. However, since the correct pseudo labels are not necessarily assigned to pixels and UMA does not have a function to correct the wrong pseudo labels, these affect the hand segmentation performance. To lessen the effects, in this research, we introduce MCD, which is an unsupervised domain adaptation method based on adversarial learning, into UMA for preventing the generation of wrong pseudo labels. Specifically, we utilize two domain classifiers to classify the probability map of the hand region estimated with the pseudo label and focus on the discrepancy between the domain classification results. Based on this discrepancy, we apply the hand segmentation model to a new domain with an unsupervised manner and evaluate whether each pixel of target data belongs to hand region or not. From this process, we lessen the effects of generation of wrong pseudo labels. Through the extensive experiments of hand segmentation with public datasets, we confirmed that the proposed method achieved the average accuracy improvement of 3.8% compared with UMA. | |
| キーワード | （和） | ドメイン適応 / ハンドセグメンテーション / 一人称ビジョン / / / / / |
| （英） | Domain Adaptation / Hand Segmentation / First-person Vision / / / / / | |
| 文献情報 | 信学技報, vol. 121, no. 427, PRMU2021-83, pp. 145-150, 2022年3月. | |
| 資料番号 | PRMU2021-83 | |
| 発行日 | 2022-03-03 (PRMU) | |
| ISSN | Online edition: ISSN 2432-6380 | |
| 著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します．(許諾番号：10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) | |
| PDFダウンロード | PRMU2021-83 |
|
| 研究会情報 | |
| 研究会 | PRMU IPSJ-CVIM |
| 開催期間 | 2022-03-10 - 2022-03-11 |
| 開催地（和） | オンライン開催 |
| 開催地（英） | Online |
| テーマ（和） | 微分可能レンダリング |
| テーマ（英） | Differentiable rendering |
| 講演論文情報の詳細 | |
| 申込み研究会 | PRMU |
| 会議コード | 2022-03-PRMU-CVIM |
| 本文の言語 | 日本語 |
| タイトル（和） | UMAとMCDの組み合わせによる一人称視点動画におけるハンドセグメンテーション |
| サブタイトル（和） | |
| タイトル（英） | Hand Segmentation in Egocentric Videos by Combining UMA and MCD |
| サブタイトル（英） | |
| キーワード(1)（和/英） | ドメイン適応 / Domain Adaptation |
| キーワード(2)（和/英） | ハンドセグメンテーション / Hand Segmentation |
| キーワード(3)（和/英） | 一人称ビジョン / First-person Vision |
| キーワード(4)（和/英） | / |
| キーワード(5)（和/英） | / |
| キーワード(6)（和/英） | / |
| キーワード(7)（和/英） | / |
| キーワード(8)（和/英） | / |
| 第1著者 氏名（和/英/ヨミ） | 鈴木 健一 / Kenichi Suzuki / スズキ ケンイチ |
| 第1著者 所属（和/英） | 大阪府立大学 (略称： 阪府大) Osaka Prefecture University (略称： Osaka Prefecture Univ.) |
| 第2著者 氏名（和/英/ヨミ） | 井上 勝文 / Katsufumi Inoue / |
| 第2著者 所属（和/英） | 大阪府立大学 (略称： 阪府大) Osaka Prefecture University (略称： Osaka Prefecture Univ.) |
| 第3著者 氏名（和/英/ヨミ） | 吉岡 理文 / Michifumi Yoshioka / |
| 第3著者 所属（和/英） | 大阪府立大学 (略称： 阪府大) Osaka Prefecture University (略称： Osaka Prefecture Univ.) |
| 第4著者 氏名（和/英/ヨミ） | / / |
| 第4著者 所属（和/英） | (略称： ) (略称： ) |
| 第5著者 氏名（和/英/ヨミ） | / / |
| 第5著者 所属（和/英） | (略称： ) (略称： ) |
| 第6著者 氏名（和/英/ヨミ） | / / |
| 第6著者 所属（和/英） | (略称： ) (略称： ) |
| 第7著者 氏名（和/英/ヨミ） | / / |
| 第7著者 所属（和/英） | (略称： ) (略称： ) |
| 第8著者 氏名（和/英/ヨミ） | / / |
| 第8著者 所属（和/英） | (略称： ) (略称： ) |
| 第9著者 氏名（和/英/ヨミ） | / / |
| 第9著者 所属（和/英） | (略称： ) (略称： ) |
| 第10著者 氏名（和/英/ヨミ） | / / |
| 第10著者 所属（和/英） | (略称： ) (略称： ) |
| 第11著者 氏名（和/英/ヨミ） | / / |
| 第11著者 所属（和/英） | (略称： ) (略称： ) |
| 第12著者 氏名（和/英/ヨミ） | / / |
| 第12著者 所属（和/英） | (略称： ) (略称： ) |
| 第13著者 氏名（和/英/ヨミ） | / / |
| 第13著者 所属（和/英） | (略称： ) (略称： ) |
| 第14著者 氏名（和/英/ヨミ） | / / |
| 第14著者 所属（和/英） | (略称： ) (略称： ) |
| 第15著者 氏名（和/英/ヨミ） | / / |
| 第15著者 所属（和/英） | (略称： ) (略称： ) |
| 第16著者 氏名（和/英/ヨミ） | / / |
| 第16著者 所属（和/英） | (略称： ) (略称： ) |
| 第17著者 氏名（和/英/ヨミ） | / / |
| 第17著者 所属（和/英） | (略称： ) (略称： ) |
| 第18著者 氏名（和/英/ヨミ） | / / |
| 第18著者 所属（和/英） | (略称： ) (略称： ) |
| 講演者 | 第1著者 |
| 発表日時 | 2022-03-11 14:45:00 |
| 発表時間 | 15分 |
| 申込先研究会 | PRMU |
| 資料番号 | PRMU2021-83 |
| 巻番号（vol） | vol.121 |
| 号番号（no） | no.427 |
| ページ範囲 | pp.145-150 |
| ページ数 | 6 |
| 発行日 | 2022-03-03 (PRMU) |
[研究会発表申込システムのトップページに戻る]