講演名 2005/10/11
確率文脈自由文法の変分ベイズ推定における確率的複雑さについて(一般, 脳・ヒューマンモデリング, 一般)
星野 力, 渡辺 一帆, 渡辺 澄夫,
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 近年、ベイズ法を近似する手法として変分ベイズ法が注目されている。効率的な計算量と実験的な優位性は示されているが、その数理的な性質は未解明の部分が多い。本報告では、真のモデルを含む識別不能な確率文脈自由文法を変分ベイズ法で学習した場合の目的関数である変分確率的複雑さの漸近的な振舞いを導出する。解析の結果、ある事前分布の条件のもとでは、確率的複雑さは識別可能なモデルに比べて、顕著に小さくなることが分った。
抄録(英) Variational Bayesian method is proposed for the approximation of Bayesian method. In spite of efficiency and experimental good performance, their mathematical property has not yet been clarified. In this paper we analyze variational Bayesian Stochastic Context Free Grammer which includes the true one thus the model is non-identifiable. We derive their asymptotic stochastic complexity. It is shown that in some prior condition, the stochastic complexity is much smaller than identifiable models.
キーワード(和) 確率文脈自由文法 / 識別不能性 / 変分ベイズ法 / 確率的複雑さ
キーワード(英) Stochastic Context Free Grammer / Non-identifiable models / Variational Bayesian method / Stochastic Complexity
資料番号 NC2005-50
発行日

研究会情報
研究会 NC
開催期間 2005/10/11(から1日開催)
開催地(和)
開催地(英)
テーマ(和)
テーマ(英)
委員長氏名(和)
委員長氏名(英)
副委員長氏名(和)
副委員長氏名(英)
幹事氏名(和)
幹事氏名(英)
幹事補佐氏名(和)
幹事補佐氏名(英)

講演論文情報詳細
申込み研究会 Neurocomputing (NC)
本文の言語 JPN
タイトル(和) 確率文脈自由文法の変分ベイズ推定における確率的複雑さについて(一般, 脳・ヒューマンモデリング, 一般)
サブタイトル(和)
タイトル(英) Stochastic Complexity of Stochastic Context Free Grammer on Variational Bayesian method
サブタイトル(和)
キーワード(1)(和/英) 確率文脈自由文法 / Stochastic Context Free Grammer
キーワード(2)(和/英) 識別不能性 / Non-identifiable models
キーワード(3)(和/英) 変分ベイズ法 / Variational Bayesian method
キーワード(4)(和/英) 確率的複雑さ / Stochastic Complexity
第 1 著者 氏名(和/英) 星野 力 / Tikara HOSINO
第 1 著者 所属(和/英) 東京工業大学大学院総合理工学研究科知能システム科学専攻:日本ユニシス株式会社
Computational Intelligence and System Science, Tokyo Inistitute of Technology:Nihon Unisys, Ltd.
第 2 著者 氏名(和/英) 渡辺 一帆 / Kazuho WATANABE
第 2 著者 所属(和/英) 東京工業大学大学院総合理工学研究科知能システム科学専攻
Computational Intelligence and System Science, Tokyo Inistitute of Technology
第 3 著者 氏名(和/英) 渡辺 澄夫 / Sumio WATANABE
第 3 著者 所属(和/英) 東京工業大学精密工学研究所
Precision and Intelligence Laboratory, Tokyo Institute of Technology
発表年月日 2005/10/11
資料番号 NC2005-50
巻番号(vol) vol.105
号番号(no) 342
ページ範囲 pp.-
ページ数 6
発行日