| 講演名 | 1997/6/20 離散型HMnetによる新聞記事からの文節モデルの獲得 原田 淳, 鈴木 基之, 牧野 正三, |
|---|---|
| PDFダウンロードページ | PDFダウンロードページへ |
| 抄録(和) | 現在よく用いられている統計的言語モデルには, n-gramモデルとer godic HMMがある. これらのモデルは局所的な単語のつながりをよく表現できるが, 遠くの離れた単語間の相関を表現することは事実上困難である. これに対し離散型HMnetは, 位置に関する情報を記述できる. 本報告では, 離散型HMetを新聞記事から抽出した文節に適用し, HMnetの自然言語に対する評価を行った. その結果, 語彙1172のデータセットに対してbigramを越えるperplexityを示し, またHMnetは文節の構造をうまく獲得していた. |
| 抄録(英) | Word n-gram and ergodic HMMs are generally used as statistical language models. They can express correlations between short distance words, but are difficult to express correlations between long distance words. The HMnet can express locations of words. In this paper, we apply the discrete-type HMnet to express a Bunsetsu model using newspaper articles and examine relation between the obtained model and that given by a expert. By experiment it was shown that perplexity of discrete-type HMnet was lower than that of word-bigram, and the structure of HMnet showed good correlation with the structure of Bunsetsu. |
| キーワード(和) | 離散型HMnet / NL-HMnet / 逐次状態分割法 / 言語モデル / 文節モデル |
| キーワード(英) | discrete-type HMnet / NL-HMnet / Successive State Splitting / Language model / Bunsetsu models |
| 資料番号 | SP97-24 |
| 発行日 |
| 研究会情報 | |
| 研究会 | SP |
|---|---|
| 開催期間 | 1997/6/20(から1日開催) |
| 開催地（和） | |
| 開催地（英） | |
| テーマ（和） | |
| テーマ（英） | |
| 委員長氏名（和） | |
| 委員長氏名（英） | |
| 副委員長氏名（和） | |
| 副委員長氏名（英） | |
| 幹事氏名（和） | |
| 幹事氏名（英） | |
| 幹事補佐氏名（和） | |
| 幹事補佐氏名（英） | |
| 講演論文情報詳細 | |
| 申込み研究会 | Speech (SP) |
|---|---|
| 本文の言語 | JPN |
| タイトル（和） | 離散型HMnetによる新聞記事からの文節モデルの獲得 |
| サブタイトル（和） | |
| タイトル（英） | Automatic Acquisition of Bunsetsu Model Using Discrete-type HMnet from Newspaper Articles |
| サブタイトル（和） | |
| キーワード(1)（和/英） | 離散型HMnet / discrete-type HMnet |
| キーワード(2)（和/英） | NL-HMnet / NL-HMnet |
| キーワード(3)（和/英） | 逐次状態分割法 / Successive State Splitting |
| キーワード(4)（和/英） | 言語モデル / Language model |
| キーワード(5)（和/英） | 文節モデル / Bunsetsu models |
| 第 1 著者 氏名（和/英） | 原田 淳 / Atsushi Harada |
| 第 1 著者 所属（和/英） | 東北大学情報科学研究科 Graduate school of Information Sciences, Tohoku Univ. |
| 第 2 著者 氏名（和/英） | 鈴木 基之 / Motoyuki Suzuki |
| 第 2 著者 所属（和/英） | 東北大学大型計算機センター Computer Center, Tohoku Univ. |
| 第 3 著者 氏名（和/英） | 牧野 正三 / Shouzou Makino |
| 第 3 著者 所属（和/英） | 東北大学大型計算機センター Computer Center, Tohoku Univ. |
| 発表年月日 | 1997/6/20 |
| 資料番号 | SP97-24 |
| 巻番号（vol） | vol.97 |
| 号番号（no） | 115 |
| ページ範囲 | pp.- |
| ページ数 | 6 |
| 発行日 | |