講演名 2016-01-29
ノイズあり教師によるパーセプトロン学習の統計力学的解析
本田 新(奈良先端大), 池田 和司(奈良先端大),
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 単純パーセプトロンは入力ベクトルと重みベクトルの内積の符号を出力する最も基礎的な学習機械であり, その学習特性は半世紀にわたって解析が続いている. 近年は, 学習の時間変化を巨視パラメータの微分方程式で記述することで学習曲線を求める統計力学的手法が主流であり, さまざまな場合について解析が行われているが, 教師信号に観測ノイズが重畳する場合には,パーセプトロン学習において学習曲線に非単調性があることが知られている. そこで本稿では,雑音が重畳する教師信号でアダトロン学習やヘブ学習を行った場合について学習曲線を導出した. その結果,アダトロン学習ではパーセプトロン学習と同様に学習曲線が非単調になるが, ヘブ学習ではならないことがわかった.
抄録(英) Learning curves of simple perceptron were derived here. They have been analyzed for half a century and the learning curve of the perceptron learning with noisy teacher was shown to be non-monotonic. In this work, we analyzed the Adatron learning and the Hebb learning in the same situation in the same way and found that the learning curve of the Adatron learning is non-monotonic while that of the Hebb learning is monotonic.
キーワード(和) 単純パーセプトロン / オンライン学習 / 非単調学習曲線 / 統計力学
キーワード(英) Perceptron / online learning / nonmonotonic learning curve / statistical mechanics
資料番号 NC2015-65
発行日 2016-01-21 (NC)

研究会情報
研究会 NC / NLP
開催期間 2016/1/28(から2日開催)
開催地(和) 九州工業大学 若松キャンパス
開催地(英) Kyushu Institute of Technology
テーマ(和) ニューロコンピューティングの実装および人間科学のための解析・モデル化,一般
テーマ(英) Implementation of Neuro Computing,Analysis and Modeling of Human Science, etc
委員長氏名(和) 斎藤 利通(法政大) / 神野 健哉(日本工大)
委員長氏名(英) Toshimichi Saito(Hosei Univ.) / Kenya Jinno(Nippon Inst. of Tech.)
副委員長氏名(和) 佐藤 茂雄(東北大) / 藤坂 尚登(広島市大)
副委員長氏名(英) Shigeo Sato(Tohoku Univ.) / Naoto Fujisaka(Hiroshima City Univ.)
幹事氏名(和) 堀尾 恵一(九工大) / 田中 宏喜(京都産大) / 長谷川 幹雄(東京理科大) / 和田 昌浩(甲南大)
幹事氏名(英) Keiichi Horio(Kyushu Inst. of Tech.) / Hiroki Tanaka(Kyoto Sangyo Univ.) / Mikio Hasegawa(Tokyo Univ. of Science) / Masahiro Wada(Konan Univ.)
幹事補佐氏名(和) 神原 裕行(東工大) / 秋間 学尚(東北大) / 中野 秀洋(東京都市大) / 麻原 寛之(岡山理科大)
幹事補佐氏名(英) Hiroyuki Kanbara(Tokyo Inst. of Tech.) / Hisanao Akima(Tohoku Univ.) / Hidehiro Nakano(Tokyo City Univ.) / Hiroyuki Asahara(Okayama Univ. of Science)

講演論文情報詳細
申込み研究会 Technical Committee on Neurocomputing / Technical Committee on Nonlinear Problems
本文の言語 JPN
タイトル(和) ノイズあり教師によるパーセプトロン学習の統計力学的解析
サブタイトル(和)
タイトル(英) Statistical Mechanics of Perceptron Learning with Noisy Teacher
サブタイトル(和)
キーワード(1)(和/英) 単純パーセプトロン / Perceptron
キーワード(2)(和/英) オンライン学習 / online learning
キーワード(3)(和/英) 非単調学習曲線 / nonmonotonic learning curve
キーワード(4)(和/英) 統計力学 / statistical mechanics
第 1 著者 氏名(和/英) 本田 新 / Arata Honda
第 1 著者 所属(和/英) 奈良先端科学技術大学院大学(略称:奈良先端大)
Nara Institute of Science and Technology(略称:NAIST)
第 2 著者 氏名(和/英) 池田 和司 / Kazushi Ikeda
第 2 著者 所属(和/英) 奈良先端科学技術大学院大学(略称:奈良先端大)
Nara Institute of Science and Technology(略称:NAIST)
発表年月日 2016-01-29
資料番号 NC2015-65
巻番号(vol) vol.115
号番号(no) NC-426
ページ範囲 pp.45-48(NC),
ページ数 4
発行日 2016-01-21 (NC)