講演名 2023-10-10
ユーザの各動作時における映像と音の時間ズレが視聴覚統合に与える影響の検討
井元 麻衣子(NTT), 菊地 由実(NTT), 深津 真二(NTT),
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 私たちはこれまで,スポーツの試合や音楽イベント等のエンタテインメントにおいて,配信先にいる複数のリモートユーザが配信者に対して行うリアクションをコメントや投げ銭などのシステムではなく「映像と音声」でフィードバックするシステムを作り,その「映像と音声」を配信元の会場で集約して統合することで,一体感ある空間を生み出すことを目指し研究開発を進めてきた.この際,複数リモートユーザからフィードバックされる映像と音声は各ユーザのNW環境等に起因する遅延により,時間的なズレが生じ,各リモートユーザ間の一体感を低減させる.この一体感の低減の解消を目的として,リモートユーザの各種動作(周期動作,非周期動作, 周期性の揺らぎ)時における映像と音の時間的なズレが人に与える違和感の範囲を明らかにするために心理物理学実験を行った.本稿ではその結果を報告する.
抄録(英) We have been researching and developing video streaming solutions for sports games, music events, and other entertainment fields. Our goal is to create a virtual space where both content online streamer and content receivers can feel a sense of unity. To enable this, we have created a system that supports receiving audio/visual reactions from multiple content receivers to deliver them as feedbacks to the online streamer. However, network latency causes a discrepancy in the timing of feedback received from each receiver, which causes a feeling of lack of unity, or non-synchronization. It is impossible to completely eliminate the network latency today. As our proposal, we conducted psychophysical experiments to clarify the range of discomfort that the temporal misalignment of image and sound causes to people in various actions (repetitive action, acyclic action, and fluctuation of periodicity) received from multiple remote receivers. This paper illustrates the results of the experiment.
キーワード(和) 臨場感 / 一体感 / 視聴覚統合の時間窓 / 心理物理学実験
キーワード(英) Realistic sensation / Sense of unity / Time window of audiovisual integration / Psychological experiment
資料番号 HIP2023-59
発行日 2023-10-03 (HIP)

研究会情報
研究会 HIP
開催期間 2023/10/10(から2日開催)
開催地(和) 京都経済センター
開催地(英) Kyoto Keizai Center
テーマ(和) 眼球運動(調節,瞳孔を含む),空間知覚(奥行き知覚・運動知覚等),およびヒューマン情報処理一般
テーマ(英) Eye Movement (including Accommodation and Pupil), Spatial Perception (Depth Perception, Motion Perception, etc.), etc.
委員長氏名(和) 和田 有史(立命館大)
委員長氏名(英) Yuji Wada(Ritsumeikan Univ.)
副委員長氏名(和) 梅村 浩之(産総研) / 清河 幸子(名大)
副委員長氏名(英) Hiroyuki Umemoto(AIST) / Sachiko Kiyokawa(Nagoya Univ.)
幹事氏名(和) 山田 祐樹(九大) / 和田 充史(NICT)
幹事氏名(英) Yuki Yamada(Kyushu Univ.) / Atsushi Wada(NICT)
幹事補佐氏名(和) 根岸 一平(金沢工大) / 田中 大介(鳥取大)
幹事補佐氏名(英) Ippei Negishi(Kanazawa Inst. of Tech.) / Daisuke Tanaka(Tottori Univ.)

講演論文情報詳細
申込み研究会 Technical Committee on Human Information Processing
本文の言語 JPN
タイトル(和) ユーザの各動作時における映像と音の時間ズレが視聴覚統合に与える影響の検討
サブタイトル(和)
タイトル(英) Effect of Time Lag between Image and Sound during Various User Audiovisual Integration
サブタイトル(和)
キーワード(1)(和/英) 臨場感 / Realistic sensation
キーワード(2)(和/英) 一体感 / Sense of unity
キーワード(3)(和/英) 視聴覚統合の時間窓 / Time window of audiovisual integration
キーワード(4)(和/英) 心理物理学実験 / Psychological experiment
第 1 著者 氏名(和/英) 井元 麻衣子 / Maiko Imoto
第 1 著者 所属(和/英) 日本電信電話株式会社(略称:NTT)
Nippon Telegraph and Telephone Corporation(略称:NTT)
第 2 著者 氏名(和/英) 菊地 由実 / Yumi Kikuchi
第 2 著者 所属(和/英) NTT人間情報研究所(略称:NTT)
NTT Human Informatics Laboratories(略称:NTT)
第 3 著者 氏名(和/英) 深津 真二 / Shinji Fukatsu
第 3 著者 所属(和/英) NTT人間情報研究所(略称:NTT)
NTT Human Informatics Laboratories(略称:NTT)
発表年月日 2023-10-10
資料番号 HIP2023-59
巻番号(vol) vol.123
号番号(no) HIP-205
ページ範囲 pp.1-6(HIP),
ページ数 6
発行日 2023-10-03 (HIP)