講演名 2008-01-25
遠隔PC要約筆記のための指示発話と動作の関連性分析(福祉と知能・情動・認知障害,福祉と音声処理,一般)
斉藤 健, 伊藤 綾鹿, 竹内 義則, 大西 昇, 飯塚 重善, 中嶌 信弥,
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 聴覚障害者への情報保障として、講師の音声・映像を遠隔地にいる筆記者へ送り、要約文を講義室内のスクリーンに提示する、遠隔PC要約筆記がある。遠隔PC要約筆記では、講師が指示しながら指示発話をした際に,要釣筆記者がその指示動作を見ていない場合は対応付けすることが難しい.そのため、指示発話と指示対象とを自動的に対応付けすることで、筆記者が指示語を入力したとき対応した指示対象を表示するシステムの開発を行っている。本研究では、上記システム作成のために必要となる処理である、指示発話抽出処理について、指示発話と動作との関連性の分析を行う。音声の指示発話に関する分析結果を利用した音声処理手法、映像の観察による指示動作に関連した特徴量抽出について述べた後、指示発話と動作の関連性を分析することで、指示発話特有の動作を見つけ、音声情報に加えて映像情報を利用した指示発話の抽出手法を提案する。
抄録(英) Hearing-impaired students need complementary technologies, such as remote transcription. We explain remote transcription. A transcriber watches the lecture as captured by camera and microphone and transcribes what an instructor says using a PC. The transcription is then sent to a display screen in the classroom. In remote transcription, a transcriber is difficult to assign a demonstrative speech phrase with a pointing object because he/she cannot look at the pointing object when the instructor utters the demonstrative speech phrase. Therefore, we are developing a system to assign the demonstrative speech phrase with the pointing object automatically and then display the pointing object when the transcriber input the demonstrative speech phrase. In this paper, we analyze a relation about the demonstrative speech phrases and the pointing object, which is required in above system. We describe about the method of audio signal processing based on the analysis about the demonstrative speech phrases and the method of a feature extraction associated with the analysis about the pointing behavior. From the result of the analysis, we propose a new extraction method of the demonstrative speech phrases that used a audio /visual information.
キーワード(和) 要約筆記 / 指示発話 / 指示対象 / 指示動作
キーワード(英) transcription / demonstrative speech phrases / pointing object / pointing gesture
資料番号 TL2007-75,SP2007-170,WIT2007-75
発行日

研究会情報
研究会 SP
開催期間 2008/1/18(から1日開催)
開催地(和)
開催地(英)
テーマ(和)
テーマ(英)
委員長氏名(和)
委員長氏名(英)
副委員長氏名(和)
副委員長氏名(英)
幹事氏名(和)
幹事氏名(英)
幹事補佐氏名(和)
幹事補佐氏名(英)

講演論文情報詳細
申込み研究会 Speech (SP)
本文の言語 JPN
タイトル(和) 遠隔PC要約筆記のための指示発話と動作の関連性分析(福祉と知能・情動・認知障害,福祉と音声処理,一般)
サブタイトル(和)
タイトル(英) An Analysis between Pointing Object and Demonstrative Speech Phrases for Remote Transcription
サブタイトル(和)
キーワード(1)(和/英) 要約筆記 / transcription
キーワード(2)(和/英) 指示発話 / demonstrative speech phrases
キーワード(3)(和/英) 指示対象 / pointing object
キーワード(4)(和/英) 指示動作 / pointing gesture
第 1 著者 氏名(和/英) 斉藤 健 / Ken SAITO
第 1 著者 所属(和/英) 名古屋大学大学院情報科学研究科
Graduate School of Information Science, Nagoya University
第 2 著者 氏名(和/英) 伊藤 綾鹿 / Ayaka ITO
第 2 著者 所属(和/英) 名古屋大学大学院情報科学研究科
Graduate School of Information Science, Nagoya University
第 3 著者 氏名(和/英) 竹内 義則 / Yoshinori TAKEUCHI
第 3 著者 所属(和/英) 名古屋大学大学院情報科学研究科
Graduate School of Information Science, Nagoya University
第 4 著者 氏名(和/英) 大西 昇 / Noboru OHNISHI
第 4 著者 所属(和/英) 名古屋大学大学院情報科学研究科
Graduate School of Information Science, Nagoya University
第 5 著者 氏名(和/英) 飯塚 重善 / Shigeyoshi IIZUKA
第 5 著者 所属(和/英) NTTサイバーソリューション研究所
NTT Cyber Solutions Laboratories, NTT Corporation
第 6 著者 氏名(和/英) 中嶌 信弥 / Shinya NAKAJIMA
第 6 著者 所属(和/英) 国士舘大学理工学部理工学科
Department of Electronics and Informatics, School of Science and Engineering, Kokushikan University
発表年月日 2008-01-25
資料番号 TL2007-75,SP2007-170,WIT2007-75
巻番号(vol) vol.107
号番号(no) 435
ページ範囲 pp.-
ページ数 6
発行日