| 講演名 | 2021-08-21 マルチモーダル特徴量を用いたターン管理の意欲と実際のターン交替の同時予測 石井 亮(カーネギーメロン大), Xutong Ren(カーネギーメロン大), Michal Muszynski(カーネギーメロン大), Louis-Philippe Morency(カーネギーメロン大), |
|---|---|
| PDFダウンロードページ |  PDFダウンロードページへ |
| 抄録(和) | これまで多くの研究が，実際のターン交替が起こるか否かを予測することに焦点を当ててきた．我々の知る限り，話し手と聞き手の2者のターン管理の意欲を明示的に扱って，それを推定する試みはない．本研究では，ターン管理の意欲を推定することに初めて取り組み，対話者の音声，言語，画像のマルチモーダル特徴量を用いた推定手法を提案する．さらに，従来のターン交替の予測タスクに，ターン管理の意欲の予測タスクを追加し，マルチタスク学習アプローチを用いた，高性能な新しいターン交替の予測モデルを提案する．最初に話し手と聞き手のターン管理の意欲のスコアを含む，新しい2者対話コーパスを紹介する．構築した予測モデルの性能評価の結果，話し手と聞き手のマルチモーダル特徴量を利用することで，ターン管理の意欲を高精度に予測可能であること，ターン管理の意欲とターン交替の予測タスクをマルチタスク学習によって同時にモデル化することで，ターン管理の意欲およびターン交替の予測性能が向上することを示す． |
| 抄録(英) | |
| キーワード(和) | ターン管理の意欲 / ターン交替予測 / マルチタスク学習 / マルチモーダル深層学習 |
| キーワード(英) | |
| 資料番号 | HCS2021-22 |
| 発行日 | 2021-08-14 (HCS) |
| 研究会情報 | |
| 研究会 | HCS |
|---|---|
| 開催期間 | 2021/8/21(から2日開催) |
| 開催地（和） | オンライン開催 |
| 開催地（英） | Online |
| テーマ（和） | CSCWの理論・実践に関する研究および一般 |
| テーマ（英） | Theory and practice about CSCW |
| 委員長氏名（和） | 井上 智雄(筑波大) |
| 委員長氏名（英） | Tomoo Inoue(Univ. of Tsukuba) |
| 副委員長氏名（和） | 林 勇吾(立命館大) / 神田 智子(大阪工業大学) |
| 副委員長氏名（英） | Yugo Hayashi(Ritsumeikan Univ.) / Tomoko Kanda(Osaka Inst. of Tech.) |
| 幹事氏名（和） | 吉田 悠(日大) / 藤原 健(台湾国立中正大) / 小森 政嗣(阪電通大) |
| 幹事氏名（英） | Haruka Yoshida(Nihon Univ.) / Ken Fujiwara(National Chung Cheng Univ) / Masashi Komori(Osaka Electro-Comm. Univ.) |
| 幹事補佐氏名（和） | 黄 宏軒(福知山公立大) / 飯塚 重善(神奈川大) / 高嶋 和毅(東北大) / 斎藤 博人(東京電機大) / 石井 亮(NTT) |
| 幹事補佐氏名（英） | HUANG HUNGHSUAN(Univ. of Fukuchiyama) / Shigeyoshi Iizuka(Kanagawa Univ.) / Kazuki Takashima(Tohoku Univ.) / Hiroto Saito(Tokyo Denki Univ.) / Ryo Ishii(NTT) |
| 講演論文情報詳細 | |
| 申込み研究会 | Technical Committee on Human Communication Science |
|---|---|
| 本文の言語 | JPN |
| タイトル（和） | マルチモーダル特徴量を用いたターン管理の意欲と実際のターン交替の同時予測 |
| サブタイトル（和） | |
| タイトル（英） | Joint Prediction of Turn-changing and Turn-management Willingness using Multimodal Features |
| サブタイトル（和） | |
| キーワード(1)（和/英） | ターン管理の意欲 |
| キーワード(2)（和/英） | ターン交替予測 |
| キーワード(3)（和/英） | マルチタスク学習 |
| キーワード(4)（和/英） | マルチモーダル深層学習 |
| 第 1 著者 氏名（和/英） | 石井 亮 / Ryo Ishii |
| 第 1 著者 所属（和/英） | カーネギーメロン大学(略称：カーネギーメロン大) Carnegie Mellon University(略称：CMU) |
| 第 2 著者 氏名（和/英） | Xutong Ren / Xutong Ren |
| 第 2 著者 所属（和/英） | カーネギーメロン大学(略称：カーネギーメロン大) Carnegie Mellon University(略称：CMU) |
| 第 3 著者 氏名（和/英） | Michal Muszynski / Michal Muszynski |
| 第 3 著者 所属（和/英） | カーネギーメロン大学(略称：カーネギーメロン大) Carnegie Mellon University(略称：CMU) |
| 第 4 著者 氏名（和/英） | Louis-Philippe Morency / Louis-Philippe Morency |
| 第 4 著者 所属（和/英） | カーネギーメロン大学(略称：カーネギーメロン大) Carnegie Mellon University(略称：CMU) |
| 発表年月日 | 2021-08-21 |
| 資料番号 | HCS2021-22 |
| 巻番号（vol） | vol.121 |
| 号番号（no） | HCS-143 |
| ページ範囲 | pp.28-33(HCS), |
| ページ数 | 6 |
| 発行日 | 2021-08-14 (HCS) |