講演名 2000/3/15
多層パーセプトロンの幾何学的性質に基づく構造最適化
高田 直幸, 阿曽 弘具, 三宅 章吾,
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 誤差逆伝搬学習法によって優れた汎化性を示すネットワークを獲得するためには, 学習前のネットワーク構造の選択や, ユニット間結合の初期状態の設定に事前知識を要する.本稿では, まず, ユニット間結合の初期状態に関する事前知識の排除を目的とし, 情報幾何的アプローチを導入する.次に, 学習前のネットワーク構造の選択に関して事前知識を必要としない学習則として, 学習中の動的な構造変化を伴う学習則を提案する.提案手法の有効性は, 数値実験により検証する.
抄録(英) The back-propagation method has some problems caused by a priori specification of a network; an initial network structure and initial value of weights. In order to solve the problem concerned with the initial value dependence of weights, we adopt the steepest descent learning method based on the information geometry. We also propose a dynamic self-optimization rule as a learning algorithm that needs no priori knowleadge about the network structure. The effectiveness is shown through computational experiments.
キーワード(和) 多層パーセプトロン / 汎化性 / 情報幾何 / 計量 / 構造最適化
キーワード(英) multilayer perceptron / generalization ability / information geometry / metric / structure optimization
資料番号 NC99-165
発行日

研究会情報
研究会 NC
開催期間 2000/3/15(から1日開催)
開催地(和)
開催地(英)
テーマ(和)
テーマ(英)
委員長氏名(和)
委員長氏名(英)
副委員長氏名(和)
副委員長氏名(英)
幹事氏名(和)
幹事氏名(英)
幹事補佐氏名(和)
幹事補佐氏名(英)

講演論文情報詳細
申込み研究会 Neurocomputing (NC)
本文の言語 JPN
タイトル(和) 多層パーセプトロンの幾何学的性質に基づく構造最適化
サブタイトル(和)
タイトル(英) Optimization of Multilayer Perceptron based on the Geometric Structure
サブタイトル(和)
キーワード(1)(和/英) 多層パーセプトロン / multilayer perceptron
キーワード(2)(和/英) 汎化性 / generalization ability
キーワード(3)(和/英) 情報幾何 / information geometry
キーワード(4)(和/英) 計量 / metric
キーワード(5)(和/英) 構造最適化 / structure optimization
第 1 著者 氏名(和/英) 高田 直幸 / N. Takada
第 1 著者 所属(和/英) 東北大学大学院工学研究科電気・通信工学専攻
Department of Electrical and Communication Engineering, Graduate School of Engineering, Tohoku University
第 2 著者 氏名(和/英) 阿曽 弘具 / H. Aso
第 2 著者 所属(和/英) 東北大学大学院工学研究科電気・通信工学専攻
Department of Electrical and Communication Engineering, Graduate School of Engineering, Tohoku University
第 3 著者 氏名(和/英) 三宅 章吾 / S. Miyake
第 3 著者 所属(和/英) 東北大学大学院工学研究科応用物理学専攻
Department of Applied Physics, Graduate School of Engineering, Tohoku University
発表年月日 2000/3/15
資料番号 NC99-165
巻番号(vol) vol.99
号番号(no) 686
ページ範囲 pp.-
ページ数 8
発行日