講演名 2024-03-02
グループ会話中の顔表情の特徴点データを用いた深層学習による会話参入意欲の自動推定
山本 昂平(京都産大), 奥田 次郎(京都産大),
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 近年, 複数人の会話に参入し, 対話を活性化させるエージェントの開発が盛んである. このようなエージェントが複数人会話中に会話参入の支援を行うためには, 人の会話への参入意欲をリアルタイムに推定することが必要である. 本研究では, 複数人会話中の人の会話参入意欲を推定するため, 4人での会話において, 会話への参入意欲を連続的に取得する実験を行い, 会話参入意欲の段階的な特徴を同定した. このような会話参入意欲段階を外部から推測するために, 会話中の人の顔特徴点の2点間距離の入力データから, 会話参入意欲の5段階のレベルを推定する深層学習のモデルを構築した. 本研究では, 構築したモデルの評価を行い, 実社会での会話参入アシストエージェントへの応用可能性について考察する.
抄録(英) In recent years, there has been much interest in developing agents that can join conversations among multiple people and activate the dialog. In order for such an agent to assist people in joining a conversation, it is necessary to estimate people's willingness to join in a conversation. In this study, in order to estimate a person's willingness to participate in a multi-person conversation, we conducted an experiment in which the willingness to participate in a conversation was continuously obtained in a four-person conversation and identified the characteristics of the stages of willingness to participate in a conversation. We constructed a deep neural network model that could estimate five levels of willingness to enter a conversation from the input data of distances between facial feature points of the people in the conversation. We evaluate the model and discuss its applicability to a conversation entry assistant agent.
キーワード(和) 複数人会話 / 会話参入支援エージェント / グループディスカッション実験 / 顔特徴点2点間距離 / 深層ニューラルネットワーク / 会話参入意欲レベル推定
キーワード(英) Group Communication / Conversation-Aid Agent / Group Discussion Experiment / Facial Landmarks / Deep Neural Network / Estimation of Level of Willingness to Communicate
資料番号 HCS2023-92
発行日 2024-02-24 (HCS)

研究会情報
研究会 HCS
開催期間 2024/3/2(から2日開催)
開催地(和) 常葉大学(静岡草薙キャンパス)
開催地(英) Tokoha University(Shizuoka-Kusanagi Campus)
テーマ(和) インタラクションの計測と理解,及び一般
テーマ(英) Measuring and understanding interactions, and general
委員長氏名(和) 神田 智子(阪工大)
委員長氏名(英) Tomoko Koda(Osaka Inst. of Tech.)
副委員長氏名(和) 髙木 幸子(常磐大) / 小森 政嗣(阪電通大)
副委員長氏名(英) Sachiko Takagi(Tokiwa Univ.) / Masashi Komori(Osaka Electro-Comm. Univ.)
幹事氏名(和) 林 勇吾(立命館大) / 飯塚 重善(神奈川大) / 大本 義正(静岡大)
幹事氏名(英) Yugo Hayashi(Ritsumeikan Univ.) / Shigeyoshi Iizuka(Kanagawa Univ.) / Yoshimasa Ohmoto(Shizuoka Univ.)
幹事補佐氏名(和) 黄 宏軒(福知山公立大) / 市川 淳(静岡大) / 高嶋 和毅(東北大) / 斎藤 博人(東京電機大) / 石井 亮(NTT)
幹事補佐氏名(英) HUANG HUNGHSUAN(Univ. of Fukuchiyama) / Jun Ichikawa(Shizuoka Univ.) / Kazuki Takashima(Tohoku Univ.) / Hiroto Saito(Tokyo Denki Univ.) / Ryo Ishii(NTT)

講演論文情報詳細
申込み研究会 Technical Committee on Human Communication Science
本文の言語 JPN
タイトル(和) グループ会話中の顔表情の特徴点データを用いた深層学習による会話参入意欲の自動推定
サブタイトル(和)
タイトル(英) Estimation of willingness to participate in other's conversation by using deep learning of facial expression measurements
サブタイトル(和)
キーワード(1)(和/英) 複数人会話 / Group Communication
キーワード(2)(和/英) 会話参入支援エージェント / Conversation-Aid Agent
キーワード(3)(和/英) グループディスカッション実験 / Group Discussion Experiment
キーワード(4)(和/英) 顔特徴点2点間距離 / Facial Landmarks
キーワード(5)(和/英) 深層ニューラルネットワーク / Deep Neural Network
キーワード(6)(和/英) 会話参入意欲レベル推定 / Estimation of Level of Willingness to Communicate
第 1 著者 氏名(和/英) 山本 昂平 / Kohei Yamamoto
第 1 著者 所属(和/英) 京都産業大学(略称:京都産大)
Kyoto Sangyo University(略称:Kyoto Sangyo Univ.)
第 2 著者 氏名(和/英) 奥田 次郎 / Jiro Okuda
第 2 著者 所属(和/英) 京都産業大学(略称:京都産大)
Kyoto Sangyo University(略称:Kyoto Sangyo Univ.)
発表年月日 2024-03-02
資料番号 HCS2023-92
巻番号(vol) vol.123
号番号(no) HCS-408
ページ範囲 pp.25-30(HCS),
ページ数 6
発行日 2024-02-24 (HCS)