お知らせ 2023年度・2024年度 学生員 会費割引キャンペーン実施中です
お知らせ 技術研究報告と和文論文誌Cの同時投稿施策(掲載料1割引き)について
お知らせ 電子情報通信学会における研究会開催について
お知らせ NEW 参加費の返金について
電子情報通信学会 研究会発表申込システム
講演論文 詳細
技報閲覧サービス
[ログイン]
技報アーカイブ
 トップに戻る 前のページに戻る   [Japanese] / [English] 

講演抄録/キーワード
講演名 2019-08-23 17:15
畳み込みニューラルネットを用いた複数人会話における対人視線方向の推定
大塚和弘春日啓祐ケーラー マルティナNTTHCS2019-34
抄録 (和) 複数人会話における対人視線方向を推定するため,畳み込みニューラルネット(CNN)を用いた方法を提案する.このCNNは,頭部姿勢,眼球方向,発話状態を含む複数モダリティの非言語特徴を入力とし,「誰が誰をみているか」という対人視線方向のクラスを出力する.特徴量の組み合わせを検証した結果,頭部姿勢に眼球方向を追加することで視線の推定精度が大幅に向上することが分かった.また,一人物を対象とした「個人モデル」と,会話参加者全員を対象とした「グループモデル」を比較した結果,眼球方向を含まない不確定性が強い入力情報に対しては,グループモデルがより優位であり,ここから「聞き手は話し手を見る傾向がある」という会話の構造がグループモデルによって陰に学習されていることが示唆された.また,入力情報に眼球方向を含む場合,話し手の視線推定において,個人モデルがグループモデルより高精度であることが分かった.さらにCNNの構造として,特徴統合の位置が異なるモデルを比較した結果,個人毎の特徴統合の後に,人物間の特徴統合を行う2段階統合の構造がより有効であることが分かった.加えて,頭部姿勢計測法として画像上の顔追跡を用いた場合でも,その視線推定精度は,センサ計測の場合と遜色がないことが判明し,CNNモデルの頑健性が裏付けられた.以上,複数人会話における視線方向推定においてCNNモデルの適用可能性が確認された. 
(英) (Not available yet)
キーワード (和) 複数人会話 / 視線 / 深層学習 / 畳み込みニューラルネット / マルチモーダルインタラクション / / /  
(英) / / / / / / /  
文献情報 信学技報, vol. 119, no. 179, HCS2019-34, pp. 27-32, 2019年8月.
資料番号 HCS2019-34 
発行日 2019-08-16 (HCS) 
ISSN Print edition: ISSN 0913-5685    Online edition: ISSN 2432-6380
著作権に
ついて
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034)
PDFダウンロード HCS2019-34

研究会情報
研究会 HCS  
開催期間 2019-08-23 - 2019-08-24 
開催地(和) 滋慶医療科学大学院大学 
開催地(英) Jikei Institute 
テーマ(和) 社会的信号処理のための学際研究,および一般 
テーマ(英)  
講演論文情報の詳細
申込み研究会 HCS 
会議コード 2019-08-HCS 
本文の言語 日本語 
タイトル(和) 畳み込みニューラルネットを用いた複数人会話における対人視線方向の推定 
サブタイトル(和)  
タイトル(英) Estimating Interpersonal Gaze Directions in Multiparty Conversations using Convolutional Neural Networks 
サブタイトル(英)  
キーワード(1)(和/英) 複数人会話 /  
キーワード(2)(和/英) 視線 /  
キーワード(3)(和/英) 深層学習 /  
キーワード(4)(和/英) 畳み込みニューラルネット /  
キーワード(5)(和/英) マルチモーダルインタラクション /  
キーワード(6)(和/英) /  
キーワード(7)(和/英) /  
キーワード(8)(和/英) /  
第1著者 氏名(和/英/ヨミ) 大塚 和弘 / Kazuhiro Otsuka / オオツカ カズヒロ
第1著者 所属(和/英) 日本電信電話株式会社 (略称: NTT)
Nippon Telegraph and Telephone Corporation (略称: NTT)
第2著者 氏名(和/英/ヨミ) 春日 啓祐 / Keisuke Kasuga / カスガ ケイスケ
第2著者 所属(和/英) 日本電信電話株式会社 (略称: NTT)
Nippon Telegraph and Telephone Corporation (略称: NTT)
第3著者 氏名(和/英/ヨミ) ケーラー マルティナ / Martina Koehler /
第3著者 所属(和/英) 日本電信電話株式会社 (略称: NTT)
Nippon Telegraph and Telephone Corporation (略称: NTT)
第4著者 氏名(和/英/ヨミ) / /
第4著者 所属(和/英) (略称: )
(略称: )
第5著者 氏名(和/英/ヨミ) / /
第5著者 所属(和/英) (略称: )
(略称: )
第6著者 氏名(和/英/ヨミ) / /
第6著者 所属(和/英) (略称: )
(略称: )
第7著者 氏名(和/英/ヨミ) / /
第7著者 所属(和/英) (略称: )
(略称: )
第8著者 氏名(和/英/ヨミ) / /
第8著者 所属(和/英) (略称: )
(略称: )
第9著者 氏名(和/英/ヨミ) / /
第9著者 所属(和/英) (略称: )
(略称: )
第10著者 氏名(和/英/ヨミ) / /
第10著者 所属(和/英) (略称: )
(略称: )
第11著者 氏名(和/英/ヨミ) / /
第11著者 所属(和/英) (略称: )
(略称: )
第12著者 氏名(和/英/ヨミ) / /
第12著者 所属(和/英) (略称: )
(略称: )
第13著者 氏名(和/英/ヨミ) / /
第13著者 所属(和/英) (略称: )
(略称: )
第14著者 氏名(和/英/ヨミ) / /
第14著者 所属(和/英) (略称: )
(略称: )
第15著者 氏名(和/英/ヨミ) / /
第15著者 所属(和/英) (略称: )
(略称: )
第16著者 氏名(和/英/ヨミ) / /
第16著者 所属(和/英) (略称: )
(略称: )
第17著者 氏名(和/英/ヨミ) / /
第17著者 所属(和/英) (略称: )
(略称: )
第18著者 氏名(和/英/ヨミ) / /
第18著者 所属(和/英) (略称: )
(略称: )
第19著者 氏名(和/英/ヨミ) / /
第19著者 所属(和/英) (略称: )
(略称: )
第20著者 氏名(和/英/ヨミ) / /
第20著者 所属(和/英) (略称: )
(略称: )
講演者 第1著者 
発表日時 2019-08-23 17:15:00 
発表時間 30分 
申込先研究会 HCS 
資料番号 HCS2019-34 
巻番号(vol) vol.119 
号番号(no) no.179 
ページ範囲 pp.27-32 
ページ数
発行日 2019-08-16 (HCS) 


[研究会発表申込システムのトップページに戻る]

[電子情報通信学会ホームページ]


IEICE / 電子情報通信学会