講演抄録/キーワード |
講演名 |
2017-09-16 14:05
[招待講演]輸送理論から見た深層ニューラルネット ○園田 翔(早大) PRMU2017-60 IBISML2017-32 |
抄録 |
(和) |
深層ニューラルネットの中では何が起きているのだろうか?本講演では,深層ニューラルネットを輸送写像として説明する。輸送写像とみなすことで,深層ニューラルネットはユークリッド空間やWasserstein空間上の軌道に対応付けられる。深層学習の原型であるデノイジング・オートエンコーダーの輸送写像を解析的に計算する。深層ニューラルネットは,データ分布の特徴量を減らす方向にデータ点を輸送する輸送写像であることを説明する。 |
(英) |
What is happening in deep neural networks? In this talk, we formulate them as transport maps. From the transportation viewpoint, we can identify a deep neural network with trajectories on both the Euclidean and Wasserstein spaces. We derive the transport map of denoising autoencoders (DAEs) in an analytic form. We can understand that what deep networks do is to transport mass to decrease a certain potential functional of the data distribution. |
キーワード |
(和) |
深層ニューラルネット / 輸送写像 / 連続方程式 / Wasserstein勾配流 / デノイジング・オートエンコーダー / / / |
(英) |
deep neural network / transport map / continuity equation / Wasserstein gradient flow / denoising autoencoder / / / |
文献情報 |
信学技報, vol. 117, no. 210, PRMU2017-60, pp. 185-188, 2017年9月. |
資料番号 |
PRMU2017-60 |
発行日 |
2017-09-08 (PRMU, IBISML) |
ISSN |
Print edition: ISSN 0913-5685 Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
PDFダウンロード |
PRMU2017-60 IBISML2017-32 |
研究会情報 |
研究会 |
PRMU IBISML IPSJ-CVIM |
開催期間 |
2017-09-15 - 2017-09-16 |
開催地(和) |
東京大学 本郷キャンパス |
開催地(英) |
|
テーマ(和) |
パターン認識・機械学習基盤技術および深層学習によるメディア生成・変換・認識 |
テーマ(英) |
|
講演論文情報の詳細 |
申込み研究会 |
PRMU |
会議コード |
2017-09-PRMU-IBISML-CVIM |
本文の言語 |
日本語 |
タイトル(和) |
輸送理論から見た深層ニューラルネット |
サブタイトル(和) |
|
タイトル(英) |
Transportation aspect of deep neural network |
サブタイトル(英) |
|
キーワード(1)(和/英) |
深層ニューラルネット / deep neural network |
キーワード(2)(和/英) |
輸送写像 / transport map |
キーワード(3)(和/英) |
連続方程式 / continuity equation |
キーワード(4)(和/英) |
Wasserstein勾配流 / Wasserstein gradient flow |
キーワード(5)(和/英) |
デノイジング・オートエンコーダー / denoising autoencoder |
キーワード(6)(和/英) |
/ |
キーワード(7)(和/英) |
/ |
キーワード(8)(和/英) |
/ |
第1著者 氏名(和/英/ヨミ) |
園田 翔 / Sho Sonoda / ソノダ ショウ |
第1著者 所属(和/英) |
早稲田大学 (略称: 早大)
Waseda University (略称: Waseda Univ.) |
第2著者 氏名(和/英/ヨミ) |
/ / |
第2著者 所属(和/英) |
(略称: )
(略称: ) |
第3著者 氏名(和/英/ヨミ) |
/ / |
第3著者 所属(和/英) |
(略称: )
(略称: ) |
第4著者 氏名(和/英/ヨミ) |
/ / |
第4著者 所属(和/英) |
(略称: )
(略称: ) |
第5著者 氏名(和/英/ヨミ) |
/ / |
第5著者 所属(和/英) |
(略称: )
(略称: ) |
第6著者 氏名(和/英/ヨミ) |
/ / |
第6著者 所属(和/英) |
(略称: )
(略称: ) |
第7著者 氏名(和/英/ヨミ) |
/ / |
第7著者 所属(和/英) |
(略称: )
(略称: ) |
第8著者 氏名(和/英/ヨミ) |
/ / |
第8著者 所属(和/英) |
(略称: )
(略称: ) |
第9著者 氏名(和/英/ヨミ) |
/ / |
第9著者 所属(和/英) |
(略称: )
(略称: ) |
第10著者 氏名(和/英/ヨミ) |
/ / |
第10著者 所属(和/英) |
(略称: )
(略称: ) |
第11著者 氏名(和/英/ヨミ) |
/ / |
第11著者 所属(和/英) |
(略称: )
(略称: ) |
第12著者 氏名(和/英/ヨミ) |
/ / |
第12著者 所属(和/英) |
(略称: )
(略称: ) |
第13著者 氏名(和/英/ヨミ) |
/ / |
第13著者 所属(和/英) |
(略称: )
(略称: ) |
第14著者 氏名(和/英/ヨミ) |
/ / |
第14著者 所属(和/英) |
(略称: )
(略称: ) |
第15著者 氏名(和/英/ヨミ) |
/ / |
第15著者 所属(和/英) |
(略称: )
(略称: ) |
第16著者 氏名(和/英/ヨミ) |
/ / |
第16著者 所属(和/英) |
(略称: )
(略称: ) |
第17著者 氏名(和/英/ヨミ) |
/ / |
第17著者 所属(和/英) |
(略称: )
(略称: ) |
第18著者 氏名(和/英/ヨミ) |
/ / |
第18著者 所属(和/英) |
(略称: )
(略称: ) |
第19著者 氏名(和/英/ヨミ) |
/ / |
第19著者 所属(和/英) |
(略称: )
(略称: ) |
第20著者 氏名(和/英/ヨミ) |
/ / |
第20著者 所属(和/英) |
(略称: )
(略称: ) |
講演者 |
第1著者 |
発表日時 |
2017-09-16 14:05:00 |
発表時間 |
60分 |
申込先研究会 |
PRMU |
資料番号 |
PRMU2017-60, IBISML2017-32 |
巻番号(vol) |
vol.117 |
号番号(no) |
no.210(PRMU), no.211(IBISML) |
ページ範囲 |
pp.185-188 |
ページ数 |
4 |
発行日 |
2017-09-08 (PRMU, IBISML) |