講演名 2010-10-28
ゆとりニューラルネットワークの学習プロセスによって形成される重みベクトルの類似性に関する研究
上手 洋子, 西尾 芳文,
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 我々はこれまでに、セルアセンブリ機能を階層型ニューラルネットワークの中間層に応用したゆとりニューラルネットワークを提案している。本ネットワークに逆誤差伝播法を適用し、関数近似およびパターン認識問題について学習を行った場合、従来のネットワークより学習能力および汎化能力が優れていることを確認している。しかしながら、ゆとりニューラルネットワークのどのような学習プロセスが、よい性能を生み出すかといった原因は明らかにされておらず、より詳細な調査が必要である。そこで本研究では、重みの変化量および学習後の重みの類似度に着目する。コンピュータシミュレーションの結果、ゆとりニューラルネットワークは従来のネットワークに比べ重みの変化量が多く、学習後の重みの類似度は低いことが分かった。
抄録(英) We have recently proposed a novel neural network structure called an "Affordable Neural Network" (AfNN), in which affordable neurons of the hidden layer are considered as cell assembly function observed in human brain function. We have confirmed that the AfNN gains good performance both of the generalization ability and the learning ability. Furthermore, the AfNN has durability, because the AfNN still performs well even if some of neurons in the hidden layer are damaged after learning process. In this study, we study the characteristics of weights of the AfNN during the learning process to make clear the reason of that the AfNNs can perform well for learning and generalization abilities and operate as usually against damaging neurons.
キーワード(和) ゆとりニューラルネットワーク / ベクトル類似性 / 逆誤差伝搬法 / パターン認識
キーワード(英) Affordable Neural Network / Vector Similarity / Backpropagation Learning / Pattern Recognition
資料番号 NLP2010-90
発行日

研究会情報
研究会 NLP
開催期間 2010/10/21(から1日開催)
開催地(和)
開催地(英)
テーマ(和)
テーマ(英)
委員長氏名(和)
委員長氏名(英)
副委員長氏名(和)
副委員長氏名(英)
幹事氏名(和)
幹事氏名(英)
幹事補佐氏名(和)
幹事補佐氏名(英)

講演論文情報詳細
申込み研究会 Nonlinear Problems (NLP)
本文の言語 JPN
タイトル(和) ゆとりニューラルネットワークの学習プロセスによって形成される重みベクトルの類似性に関する研究
サブタイトル(和)
タイトル(英) Weight Vector Similarity of Affordable Neural Network by Learning Process
サブタイトル(和)
キーワード(1)(和/英) ゆとりニューラルネットワーク / Affordable Neural Network
キーワード(2)(和/英) ベクトル類似性 / Vector Similarity
キーワード(3)(和/英) 逆誤差伝搬法 / Backpropagation Learning
キーワード(4)(和/英) パターン認識 / Pattern Recognition
第 1 著者 氏名(和/英) 上手 洋子 / Yoko UWATE
第 1 著者 所属(和/英) 徳島大学大学院ソシオテクノサイエンス研究部
Tokushima University
第 2 著者 氏名(和/英) 西尾 芳文 / Yoshifumi NISHIO
第 2 著者 所属(和/英) 徳島大学大学院ソシオテクノサイエンス研究部
Tokushima University
発表年月日 2010-10-28
資料番号 NLP2010-90
巻番号(vol) vol.110
号番号(no) 255
ページ範囲 pp.-
ページ数 4
発行日