| 講演名 | 2021-05-25 マルチモーダル情報に基づく就職面接練習システムの開発 竹内 直(阪工大), 神田 智子(阪工大), |
|---|---|
| PDFダウンロードページ |  PDFダウンロードページへ |
| 抄録(和) | 本研究では，被面接者の視線・表情・姿勢の非言語情報を視線追跡装置，カメラ画像を用いて認識し，被面接者の模範的な非言語行動モデルとの比較を行うことで，振り返りを行いながら改善点を指摘する面接練習システムの開発を行った．開発の方針は，普及型HWとオープンソースを用いた安価かつ容易なシステム構築が可能であること，およびCGエージェントによる振り返りが可能であることである．これは，従来の面接練習システムは高価なHW，SWが必要であるものが多く，一般ユーザ向けになっていないと考えた為である．またCGエージェントによる振り返りを用いたシステムは，我々が知る限り少ない為である．本システムの初期評価結果として，現段階では，精度の向上やCGエージェントによるフィードバックの改良などの改善点が挙げられた． |
| 抄録(英) | This paper introduces a job interview training system that recognizes the nonverbal behaviors of the interviewee, namely, gaze, facial expression, and posture. The proposed system uses a Tobii eye tracker for gaze recognition, and camera images for facial expression and posture recognition. The system compares the recognition results with the models of the interviewee's exemplary nonverbal behaviors and point out the non-verbal behaviors that need improvement while playing back the interview recording. Our development policy of the system is to construct an inexpensive and easy system using commercially available HWs and open source, and utilization of a CG agent that gives feedback to the interviewee. Most of the current interview training systems require high-end HW and SW and are not designed for general users, and there are few systems using CG agents to give feedback. The results of the initial evaluation of the system indicate improvements are needed in terms of recognition accuracy of non-verbal behaviors and quality of the interaction with the CG agent. |
| キーワード(和) | 視線認識 / 姿勢認識 / 表情認識 / 就職面接練習 / 非言語情報 / CGエージェント / マルチモーダルインタラクション |
| キーワード(英) | gaze recognition / posture recognition / facial expression recognition / job interview training / nonverbal behaviors / CG agent / multi-modal interaction |
| 資料番号 | HCS2021-10,HIP2021-10 |
| 発行日 | 2021-05-17 (HCS, HIP) |
| 研究会情報 | |
| 研究会 | HCS / HIP / HI-SIGCE |
|---|---|
| 開催期間 | 2021/5/24(から2日開催) |
| 開催地（和） | オンライン開催 |
| 開催地（英） | Online |
| テーマ（和） | コミュニケーション支援，コミュニケーション一般およびヒューマン情報処理一般 |
| テーマ（英） | Communication Enhancing, Human Communications, and Human Information Processing |
| 委員長氏名（和） | 井上 智雄(筑波大) / 坂本 修一(東北大) |
| 委員長氏名（英） | Tomoo Inoue(Univ. of Tsukuba) / Shuichi Sakamoto(Tohoku Univ.) |
| 副委員長氏名（和） | 林 勇吾(立命館大) / 神田 智子(大阪工業大学) / 和田 有史(立命館大) / 清河 幸子(東大) |
| 副委員長氏名（英） | Yugo Hayashi(Ritsumeikan Univ.) / Tomoko Kanda(Osaka Inst. of Tech.) / Yuji Wada(Ritsumeikan Univ.) / Sachiko Kiyokawa(U. Tokyo) |
| 幹事氏名（和） | 渡邊 伸行(金沢工大) / 吉田 悠(KDDI総合研究所) / 藤原 健(阪経済大) / 坂野 雄一(NICT) / 望月 理香(NTT) / 和田 充史(NICT) |
| 幹事氏名（英） | Nobuyuki Watanabe(Kanazawa Inst. of Tech.) / Haruka Yoshida(KDDI Research) / Ken Fujiwara(Osaka Univ. of Economic) / Yuichi Sakano(NICT) / Rika Mochizuki(NTT) / Atsushi Wada(NICT) |
| 幹事補佐氏名（和） | 寺田 和憲(岐阜大) / 木村 敦(日大) / 黄 宏軒(福知山公立大) / 飯塚 重善(神奈川大) / 小森 政嗣(阪電通大) / 高嶋 和毅(東北大) / 金谷 英俊(立命館大) / 山田 祐樹(九大) |
| 幹事補佐氏名（英） | Kazunori Terada(Gifu Univ.) / Atsushi Kimura(Nihon Univ.) / HUANG HUNGHSUAN(Univ. of Fukuchiyama) / Shigeyoshi Iizuka(Kanagawa Univ.) / Masashi Komori(Osaka Electro-Comm. Univ.) / Kazuki Takashima(Tohoku Univ.) / Hidetoshi Kanaya(Ritsumeikan Univ.) / Yuki Yamada(Kyushu Univ.) |
| 講演論文情報詳細 | |
| 申込み研究会 | Technical Committee on Human Communication Science / Technical Committee on Human Information Processing / Special Interest Group on Communication Enhancement |
|---|---|
| 本文の言語 | JPN |
| タイトル（和） | マルチモーダル情報に基づく就職面接練習システムの開発 |
| サブタイトル（和） | |
| タイトル（英） | Development of a Job Interview Training System with Multi-modal Behavior Analysis |
| サブタイトル（和） | |
| キーワード(1)（和/英） | 視線認識 / gaze recognition |
| キーワード(2)（和/英） | 姿勢認識 / posture recognition |
| キーワード(3)（和/英） | 表情認識 / facial expression recognition |
| キーワード(4)（和/英） | 就職面接練習 / job interview training |
| キーワード(5)（和/英） | 非言語情報 / nonverbal behaviors |
| キーワード(6)（和/英） | CGエージェント / CG agent |
| キーワード(7)（和/英） | マルチモーダルインタラクション / multi-modal interaction |
| 第 1 著者 氏名（和/英） | 竹内 直 / Nao Takeuchi |
| 第 1 著者 所属（和/英） | 大阪工業大学(略称：阪工大) Osaka Institute of Technology(略称：OIT) |
| 第 2 著者 氏名（和/英） | 神田 智子 / Tomoko Koda |
| 第 2 著者 所属（和/英） | 大阪工業大学(略称：阪工大) Osaka Institute of Technology(略称：OIT) |
| 発表年月日 | 2021-05-25 |
| 資料番号 | HCS2021-10,HIP2021-10 |
| 巻番号（vol） | vol.121 |
| 号番号（no） | HCS-37,HIP-38 |
| ページ範囲 | pp.50-54(HCS), pp.50-54(HIP), |
| ページ数 | 5 |
| 発行日 | 2021-05-17 (HCS, HIP) |