| 講演名 | 2021-08-21 対話中の非言語行動の機能スペクトラム解析に向けて 大塚 和弘(横浜国大), |
|---|---|
| PDFダウンロードページ |  PDFダウンロードページへ |
| 抄録(和) | 人の対話において表出される非言語行動は，本質的に曖昧で多様な意味や機能を持つが，従来の排他的多クラス分類によるアプローチでは十分捉えることが出来ない．本研究では，この非言語行動の曖昧性・多様性を定量的に解析するため，非言語表出が持ちうる意味や機能の分布強度を表現する『非言語機能スペクトラム』(Nonverbal Functional Spectrum)という新概念を提唱し，その解析のための計算基盤の構築を進めている．本稿ではその一事例として，頭部運動を対象とした取り組みについて紹介する．これまで頭部運動には複数の機能があることが知られている．例えば，聞き手の頷きは，傾聴，思考，理解，肯定などのいずれかまたは複数を意味する．このような機能の多様性・曖昧性を捉えるため，本研究では表出された一つの行動に対して「唯一の機能」を仮定するのではなく，複数の機能の重複を許容した「頭部運動機能コーパス」を構築している．このコーパスは，リズム取りや強調，反応確認など発話生成に関連した機能や，傾聴や思考，理解，同意などの反応に関連した機能，さらに正負の感情表出などを含めた，計32種の機能カテゴリから構成される．複数の外部評定者によりこれら機能の非排他的なアノテーションが実施され，そのラベルの論理和として，機能の多重性が表現される．さらに我々は頭部運動機能の自動認識を目指して，頭部姿勢角，及び，発話の有無の時系列を入力として，各機能の有無を出力する畳み込みニューラルネット(CNN)を構築している．本稿ではその構造や認識精度などを概説する．最後に複数モダリティの非言語行動の統一的理解に向けて，非言語機能スペクトラム解析の課題について議論する． |
| 抄録(英) | |
| キーワード(和) | 非言語行動 / 複数人対話 / 頭部運動 / 深層学習 |
| キーワード(英) | |
| 資料番号 | HCS2021-19 |
| 発行日 | 2021-08-14 (HCS) |
| 研究会情報 | |
| 研究会 | HCS |
|---|---|
| 開催期間 | 2021/8/21(から2日開催) |
| 開催地（和） | オンライン開催 |
| 開催地（英） | Online |
| テーマ（和） | CSCWの理論・実践に関する研究および一般 |
| テーマ（英） | Theory and practice about CSCW |
| 委員長氏名（和） | 井上 智雄(筑波大) |
| 委員長氏名（英） | Tomoo Inoue(Univ. of Tsukuba) |
| 副委員長氏名（和） | 林 勇吾(立命館大) / 神田 智子(大阪工業大学) |
| 副委員長氏名（英） | Yugo Hayashi(Ritsumeikan Univ.) / Tomoko Kanda(Osaka Inst. of Tech.) |
| 幹事氏名（和） | 吉田 悠(日大) / 藤原 健(台湾国立中正大) / 小森 政嗣(阪電通大) |
| 幹事氏名（英） | Haruka Yoshida(Nihon Univ.) / Ken Fujiwara(National Chung Cheng Univ) / Masashi Komori(Osaka Electro-Comm. Univ.) |
| 幹事補佐氏名（和） | 黄 宏軒(福知山公立大) / 飯塚 重善(神奈川大) / 高嶋 和毅(東北大) / 斎藤 博人(東京電機大) / 石井 亮(NTT) |
| 幹事補佐氏名（英） | HUANG HUNGHSUAN(Univ. of Fukuchiyama) / Shigeyoshi Iizuka(Kanagawa Univ.) / Kazuki Takashima(Tohoku Univ.) / Hiroto Saito(Tokyo Denki Univ.) / Ryo Ishii(NTT) |
| 講演論文情報詳細 | |
| 申込み研究会 | Technical Committee on Human Communication Science |
|---|---|
| 本文の言語 | JPN |
| タイトル（和） | 対話中の非言語行動の機能スペクトラム解析に向けて |
| サブタイトル（和） | 頭部運動を対象とした機能コーパスと深層学習モデルの構築事例 |
| タイトル（英） | Toward functional spectrum analysis of multimodal nonverbal behaviors in multiparty conversations |
| サブタイトル（和） | An example of building functional head-movement corpus and deep-learning models |
| キーワード(1)（和/英） | 非言語行動 |
| キーワード(2)（和/英） | 複数人対話 |
| キーワード(3)（和/英） | 頭部運動 |
| キーワード(4)（和/英） | 深層学習 |
| 第 1 著者 氏名（和/英） | 大塚 和弘 / Kazuhiro Otsuka |
| 第 1 著者 所属（和/英） | 横浜国立大学(略称：横浜国大) Yokohama National University(略称：YNU) |
| 発表年月日 | 2021-08-21 |
| 資料番号 | HCS2021-19 |
| 巻番号（vol） | vol.121 |
| 号番号（no） | HCS-143 |
| ページ範囲 | pp.13-18(HCS), |
| ページ数 | 6 |
| 発行日 | 2021-08-14 (HCS) |