講演名 2012-11-08
ベイジアン変数選択における効率的なサンプリング法(第15回情報論的学習理論ワークショップ)
荒木 貴光, 池田 和司,
PDFダウンロードページ PDFダウンロードページへ
抄録(和) ベイジアン変数選択において,ギブス変数選択法は最も活用されているサンプリング法の一つであり,広範囲なモデルに適用されている.ギブス変数選択法の性能は提案分布と擬似事前分布のパラメータに強く依存し,従来法では,それらのパラメータはフルモデルに対する予備的サンプリングに基いて決定される.しかし,そのようにして得られたパラメータでは擬似事前分布は周辺事後分布を近似できず,提案分布のスケールは多くの場合不適切な値となる.本稿では,サンプリングしながらそれらのパラメータを適切な値に自動調整する適応的なアルゴリズムを提案し,ロジスティック回帰モデルのベイジアン変数選択に応用して提案アルゴリズムが従来のギブス変数選択法より効率的であることを示す.
抄録(英) In Bayesian variable selection, a Gibbs variable selection (GVS) is one of the most famous sampling algorithms, and has been used in various models. The efficiency of the GVS strongly depends on parameters of a proposal distribution and pseudo-priors, and the GVS determines their parameters based on a pilot run for a full model. However the parameters shift the pseudo-priors from the marginal posterior distributions, and make the scale of the proposal distribution an improper value in many cases. In this paper, we propose an algorithm that adapts the parameters while it runs, and confirm that our algorithm is more efficient than the conventional GVS by a experiment of Bayesian variable selection of a logistic regression model.
キーワード(和) ギブス変数選択法 / 適応的マルコフ連鎖モンテカルロ法 / ベイジアンロジスティック回帰モデル
キーワード(英) Gibbs Variable Selection / Adaptive Markov Chain Monte Carlo / Bayesian logistic regression model
資料番号 IBISML2012-75
発行日

研究会情報
研究会 IBISML
開催期間 2012/10/31(から1日開催)
開催地(和)
開催地(英)
テーマ(和)
テーマ(英)
委員長氏名(和)
委員長氏名(英)
副委員長氏名(和)
副委員長氏名(英)
幹事氏名(和)
幹事氏名(英)
幹事補佐氏名(和)
幹事補佐氏名(英)

講演論文情報詳細
申込み研究会 Information-Based Induction Sciences and Machine Learning (IBISML)
本文の言語 ENG
タイトル(和) ベイジアン変数選択における効率的なサンプリング法(第15回情報論的学習理論ワークショップ)
サブタイトル(和)
タイトル(英) An Efficient Sampling Algorithm for Bayesian Variable Selection
サブタイトル(和)
キーワード(1)(和/英) ギブス変数選択法 / Gibbs Variable Selection
キーワード(2)(和/英) 適応的マルコフ連鎖モンテカルロ法 / Adaptive Markov Chain Monte Carlo
キーワード(3)(和/英) ベイジアンロジスティック回帰モデル / Bayesian logistic regression model
第 1 著者 氏名(和/英) 荒木 貴光 / Takamitsu ARAKI
第 1 著者 所属(和/英) 奈良先端科学技術大学院大学情報科学研究科
Graduate School of Information Science, Nara Institute of Science and Technology
第 2 著者 氏名(和/英) 池田 和司 / Kazushi IKEDA
第 2 著者 所属(和/英) 奈良先端科学技術大学院大学情報科学研究科
Graduate School of Information Science, Nara Institute of Science and Technology
発表年月日 2012-11-08
資料番号 IBISML2012-75
巻番号(vol) vol.112
号番号(no) 279
ページ範囲 pp.-
ページ数 5
発行日