| 講演名 | 2000/10/20 質問応答システムの比較と評価 佐々木 裕, 磯崎 秀樹, 平 博順, 廣田 啓一, 賀沢 秀人, 平尾 努, 中島 浩之, 加藤 恒昭, |
|---|---|
| PDFダウンロードページ | PDFダウンロードページへ |
| 抄録(和) | 本稿では, いくつかの質問応答システムを独立に作成し, 50問の質問文に対する性能評価を行なった結果を報告する.質問応答システムは1999年のTREC-8のQAタスクの開催以降注目を集めており, 次のような点で従来の情報検索や情報抽出と異なっている.従来の情報検索では, 質問に対する答えを文書の単位で列挙していたが, 質問応答システムは質問の答えを記述した部分を返す.また, 従来の情報抽出は対象分野と抽出項目があらかじめ限定されていたが, 質問応答では, 抽出する項目が質問文により自由に決まる点で異なっている.本稿は, 今後の質問応答システム研究の参考とするため, 日本語QAシステムの性能のベースラインを探るとともに, 日本語QAシステムの比較・評価法を紹介するものである. |
| 抄録(英) | This paper provides an evaluation and comparison of several Japanese question answering(QA)systems on the basis of experiments on extracting answers to fifty questions from one-year newspaper articles. Question answering systems have been attracting much interest since the start of the QA of TREC-8 in 1999. QA is differentiated from information retrieval and information extration in the following sense. QA systems return the exact part of an article that directly answers the question given by a user, while information retrieval systems only return a list of articles. QA systems are open-domain, while information extraction is highly domain-dependent and predefines the items to extract by using templates. This paper explores the baseline of Japanese QA systems and also presents our experiences in evaluating and comparing QA systems. |
| キーワード(和) | 質問応答システム / 情報抽出 / 情報検索 |
| キーワード(英) | question answering systems / information extraction / information retrieval |
| 資料番号 | NLC2000-24 |
| 発行日 |
| 研究会情報 | |
| 研究会 | NLC |
|---|---|
| 開催期間 | 2000/10/20(から1日開催) |
| 開催地（和） | |
| 開催地（英） | |
| テーマ（和） | |
| テーマ（英） | |
| 委員長氏名（和） | |
| 委員長氏名（英） | |
| 副委員長氏名（和） | |
| 副委員長氏名（英） | |
| 幹事氏名（和） | |
| 幹事氏名（英） | |
| 幹事補佐氏名（和） | |
| 幹事補佐氏名（英） | |
| 講演論文情報詳細 | |
| 申込み研究会 | Natural Language Understanding and Models of Communication (NLC) |
|---|---|
| 本文の言語 | JPN |
| タイトル（和） | 質問応答システムの比較と評価 |
| サブタイトル（和） | |
| タイトル（英） | An Evaluation and Comparison of Japanese Question Answering Systems |
| サブタイトル（和） | |
| キーワード(1)（和/英） | 質問応答システム / question answering systems |
| キーワード(2)（和/英） | 情報抽出 / information extraction |
| キーワード(3)（和/英） | 情報検索 / information retrieval |
| 第 1 著者 氏名（和/英） | 佐々木 裕 / Y. Sasaki |
| 第 1 著者 所属（和/英） | NTTコミュニケーション科学基礎研究所 NTT Communication Science Laboratories |
| 第 2 著者 氏名（和/英） | 磯崎 秀樹 / H. Isozaki |
| 第 2 著者 所属（和/英） | NTTコミュニケーション科学基礎研究所 NTT Communication Science Laboratories |
| 第 3 著者 氏名（和/英） | 平 博順 / H. Taira |
| 第 3 著者 所属（和/英） | NTTコミュニケーション科学基礎研究所 NTT Communication Science Laboratories |
| 第 4 著者 氏名（和/英） | 廣田 啓一 / K. Hirota |
| 第 4 著者 所属（和/英） | NTTコミュニケーション科学基礎研究所 NTT Communication Science Laboratories |
| 第 5 著者 氏名（和/英） | 賀沢 秀人 / H. Kazawa |
| 第 5 著者 所属（和/英） | NTTコミュニケーション科学基礎研究所 NTT Communication Science Laboratories |
| 第 6 著者 氏名（和/英） | 平尾 努 / T. Hirao |
| 第 6 著者 所属（和/英） | NTTコミュニケーション科学基礎研究所 NTT Communication Science Laboratories |
| 第 7 著者 氏名（和/英） | 中島 浩之 / H. Nakajima |
| 第 7 著者 所属（和/英） | NTTコミュニケーション科学基礎研究所 NTT Communication Science Laboratories |
| 第 8 著者 氏名（和/英） | 加藤 恒昭 / T. Kato |
| 第 8 著者 所属（和/英） | NTTコミュニケーション科学基礎研究所 NTT Communication Science Laboratories |
| 発表年月日 | 2000/10/20 |
| 資料番号 | NLC2000-24 |
| 巻番号（vol） | vol.100 |
| 号番号（no） | 401 |
| ページ範囲 | pp.- |
| ページ数 | 8 |
| 発行日 | |