講演名 1995/10/19
問題解決および知識獲得過程における対話処理方式 : 図形操作との協調
賀川 経夫, 大城 英裕, 遠藤 勉,
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 対象を小学校l年の算数の世界に絞り込み,問題文と図表が混在しているドリルテキストならびに教師(人間)との対話を相互参照しながら算数の問題解決と知識獲得を行うシステムの開発を進めているが,教師との対話メディアとしては自然言語のみを想定しており,テキスト中の対象物の指示や描画操作を含むマルチモーダルコミュニケーションの実現が望まれている。本論文では,現在開発中の問題解決システムの対話処理様式を,日本語だけでなくポインティングジェスチャや描画にまで拡張する際の方式ならびに問題点について考察する。まず,問題解決システムの概要とマルチモーダ対話の例を示し,問題解決法の教示に必要なポインティングジェスチャについて述べる。次に,ポインテイングジェスチャの入力方式を検討し,日本語発話文と協調しながら解釈する方法を提案する。
抄録(英) A dialogue plays an important role in learning how to so1ve a problem and forming a concept. We are now developing a prototype system which tries to so1ve problems of first grade mathematics while it has a dialogue with a teacher. Only natural language is used as communication modality. People frequently supplement natural language comunication with simultanious coordinated pointing gestures and drawing. In this paper, we discuss multimodal communication in problem so1ving and knowledge acquisition process. First, the problem so1ving system is summarized, and an example of multimodal dialogue is given, focusing on referent resolution in mathematical problems. Next, a method of combining natural language with pointing gestures and drawing on visual aids is proposed. Finally, an algorithm of interpreting the gestures and drawings in cooperation with natural language utterances is presented.
キーワード(和) マルチモーダル対話 / 知識獲得 / 問題解決 / 自然言語処理 / 図形認識
キーワード(英) multimodal dialogue / knowledge acquisition / problem solving / natural language procesing / picture recognition
資料番号 NLC95-36,PRU95-141
発行日

研究会情報
研究会 NLC
開催期間 1995/10/19(から1日開催)
開催地(和)
開催地(英)
テーマ(和)
テーマ(英)
委員長氏名(和)
委員長氏名(英)
副委員長氏名(和)
副委員長氏名(英)
幹事氏名(和)
幹事氏名(英)
幹事補佐氏名(和)
幹事補佐氏名(英)

講演論文情報詳細
申込み研究会 Natural Language Understanding and Models of Communication (NLC)
本文の言語 JPN
タイトル(和) 問題解決および知識獲得過程における対話処理方式 : 図形操作との協調
サブタイトル(和)
タイトル(英) Dialogue Processing in Problem Solving and Knowledge Acquisition - Cooperation with Figure Operation
サブタイトル(和)
キーワード(1)(和/英) マルチモーダル対話 / multimodal dialogue
キーワード(2)(和/英) 知識獲得 / knowledge acquisition
キーワード(3)(和/英) 問題解決 / problem solving
キーワード(4)(和/英) 自然言語処理 / natural language procesing
キーワード(5)(和/英) 図形認識 / picture recognition
第 1 著者 氏名(和/英) 賀川 経夫 / Tsuneo KAGAWA
第 1 著者 所属(和/英) 大分大学工学部知能情報システム工学科
Department of Computer Science and Intelligent Systems, Oita University
第 2 著者 氏名(和/英) 大城 英裕 / Hidehiro OHKI
第 2 著者 所属(和/英) 大分大学工学部知能情報システム工学科
Department of Computer Science and Intelligent Systems, Oita University
第 3 著者 氏名(和/英) 遠藤 勉 / Tsutomu ENDO
第 3 著者 所属(和/英) 大分大学工学部知能情報システム工学科
Department of Computer Science and Intelligent Systems, Oita University
発表年月日 1995/10/19
資料番号 NLC95-36,PRU95-141
巻番号(vol) vol.95
号番号(no) 320
ページ範囲 pp.-
ページ数 6
発行日