講演名 1999/10/25
文節機能語列の数え上げと文節解析
兵藤 安昭, 村上 裕, 池田 尚志,
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 我々は日本語文解析システムIBUKIを開発しているが,そこでは比較的長い単位の機能語(約4,000語)を基本機能語として辞書に登録し文節解析を行っている.もし,機能語の単位をさらに長く取って,実際に現われる文節中の機能語列そのものを何らかの方法で,ほとんど全て辞書に表現することが可能ならば,文節解析で難しいとされるひらがな連続文字中の誤りなどを減らすことができ,解析精度を高めることが可能となるであろう.そこで我々は毎日新聞記事4年分を解析して,日本語文中に実際に現われる文節中の機能語列を数え上げることを試みた.次に,このようにして収集した文節機能語列を整理,拡張し,より粒度の大きな機能語辞書を構築して,文節解析システムへの適用を行った.
抄録(英) Enumerating all or almost all functional expressions in real text is tried. The MAINICHI newspaper article of 4 years is analyzed by our Japanese sentence analysis system IBUKI and about 47k functional expressions are extracted. We divide these functional expressions at termination form point and get about 8k functional sub-expressions. Our investigation proved that 2k out of these 8k sub-expressions cover 99.9% of total appearance of functional expressions. We tried to build new function word dictionary on the basis of these functional sub-expressions. An entry of the new dictionary has larger granularity than the former and usual function dictionary. Here granularity means the number of basic function words composing the new function word entry. We expect and can demonstrate that this new function word dictionary reduces many erroneous analyses which often occurs in long strings of hiragana characters etc.
キーワード(和) 機能語辞書 / 文節解析 / 文節機能語列 / データベース
キーワード(英) function word dictionary / bunsetsu analysis / functional expressions / database
資料番号 NLC99-19
発行日

研究会情報
研究会 NLC
開催期間 1999/10/25(から1日開催)
開催地(和)
開催地(英)
テーマ(和)
テーマ(英)
委員長氏名(和)
委員長氏名(英)
副委員長氏名(和)
副委員長氏名(英)
幹事氏名(和)
幹事氏名(英)
幹事補佐氏名(和)
幹事補佐氏名(英)

講演論文情報詳細
申込み研究会 Natural Language Understanding and Models of Communication (NLC)
本文の言語 JPN
タイトル(和) 文節機能語列の数え上げと文節解析
サブタイトル(和)
タイトル(英) Enumerating of Functional Expressions and Bunsetsu Analysis
サブタイトル(和)
キーワード(1)(和/英) 機能語辞書 / function word dictionary
キーワード(2)(和/英) 文節解析 / bunsetsu analysis
キーワード(3)(和/英) 文節機能語列 / functional expressions
キーワード(4)(和/英) データベース / database
第 1 著者 氏名(和/英) 兵藤 安昭 / Yasuaki HYOUDO
第 1 著者 所属(和/英) 岐阜大学工学部
Gifu University
第 2 著者 氏名(和/英) 村上 裕 / Yutaka MURAKAMI
第 2 著者 所属(和/英) 岐阜大学工学部
Gifu University
第 3 著者 氏名(和/英) 池田 尚志 / Takashi IKEDA
第 3 著者 所属(和/英) 岐阜大学工学部
Gifu University
発表年月日 1999/10/25
資料番号 NLC99-19
巻番号(vol) vol.99
号番号(no) 387
ページ範囲 pp.-
ページ数 6
発行日