講演名 2021-11-15
[招待講演]「新音楽視聴体験 音のVR」アプリの開発と社会展開
堀内 俊治(KDDI総合研究所),
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 筆者らはこれまでに,360 度動画のインタラクティブ視聴向けに,指定した任意の角度範囲の音場を合成する音場の選択的合成手法を提案し,提案手法を組み込んだスマートデバイス向けの「新音楽視聴体験 音のVR」と呼称する360度動画再生アプリを開発した.提案手法は,スペクトル変形に基づき,円状または球状マイクロホンアレイなどにより収音されたマルチチャネルサラウンド音響から,任意の方向を中心とした最小30度程度から最大360度の任意の角度範囲を持ち,拡大縮小されたステレオ幅を伴う2チャネルステレオ音響を合成することができる.開発したアプリでは,タッチスクリーンなどの操作により,視聴者が指定した任意の角度範囲の360度動画を楽しむことができ,再生される2チャネルステレオ音響はその範囲に応じて空間同期の観点から変化する.本稿では,提案手法と開発したアプリの概要,コンテンツの制作方法を述べ,いくつかの活用事例を紹介する.
抄録(英) We previously presented an arbitrarily angled audio-visual player app for 360-degree videos using our selective synthesis sound field technique. This technique can synthesize two-channel stereo sound with scaled stereo width having an arbitrary angle range from approximately 30 to 360 degrees centering on an arbitrary direction from multi-channel surround sound based on spectral modification. In the app, users can enjoy arbitrarily angled videos that they choose themselves by manipulating the touchscreen etc., and the stereo sound changes in terms of its spatial synchronization depending on the view. In this report, I introduce the overview of the proposed technique and developed app, the method for producing contents, and examples of use cases, respectively.
キーワード(和) 音場合成 / マイクロホンアレイ / マルチチャネルサラウンド / 360度動画 / インタラクティブ視聴 / ユーザセントリックエンタテインメント
キーワード(英) Sound field synthesis / Microphone array / Multi-channel surround sound / 360-degree video / Interactive viewing / User-centric entertainment
資料番号 EA2021-46,EMM2021-73
発行日 2021-11-08 (EA, EMM)

研究会情報
研究会 EMM / EA / ASJ-H
開催期間 2021/11/15(から2日開催)
開催地(和) オンライン開催
開催地(英) Online
テーマ(和) <ビギナーズセッション>応用/電気音響,コンテンツ処理,情報ハイディング,聴覚,一般
テーマ(英) [Beginners Session] Engineering/Electro Acoustics, Content Processing, Digital Watermarking, Psychological and Physiological Acoustics, and Related Topics
委員長氏名(和) 西村 竜一(NICT) / 梶川 嘉延(関西大) / 加藤 宏明(NICT)
委員長氏名(英) Ryoichi Nishimura(NICT) / Yoshinobu Kajikawa(Kansai Univ.) / 加藤 宏明(NICT)
副委員長氏名(和) 藤吉 正明(都立大) / 市野 将嗣(電通大) / 古家 賢一(大分大) / 小山 翔一(東大) / 坂本 修一(東北大)
副委員長氏名(英) Masaaki Fujiyoshi(Tokyo Metropolitan Univ.) / Masatsugu Ichino(Univ. of Electro-Comm.) / Kenichi Furuya(Oita Univ.) / Shoichi Koyama(Univ. of Tokyo) / 坂本 修一(東北大)
幹事氏名(和) 長谷川 まどか(宇都宮大) / 吉田 真紀(NICT) / 加古 達也(NTT) / 西浦 敬信(立命館大) / 橘 亮輔(東大) / 松井 淑恵(豊橋技科大) / 寺島 裕貴(NTT)
幹事氏名(英) Madoka Hasegawa(Utsunomiya Univ.) / Maki Yoshida(NICT) / Tatsuya Kako(NTT) / Takanobu Nishiura(RitsumeikanUniv.) / 橘 亮輔(東大) / 松井 淑恵(豊橋技科大) / 寺島 裕貴(NTT)
幹事補佐氏名(和) 今泉 祥子(千葉大) / 高嶋 洋一(開志専門職大) / 若林 佑幸(都立大) / 小松 達也(LINE)
幹事補佐氏名(英) Shoko Imaizumi(Chiba Univ.) / Youichi Takashima(Kaishi Professional Univ.) / Yukou Wakabayashi(Tokyo Metropolitan Univ.) / Tatsuya Komatsu(LINE)

講演論文情報詳細
申込み研究会 Technical Committee on Enriched MultiMedia / Technical Committee on Engineering Acoustics / Auditory Research Meeting
本文の言語 JPN
タイトル(和) [招待講演]「新音楽視聴体験 音のVR」アプリの開発と社会展開
サブタイトル(和)
タイトル(英) [Invited Talk] Development and Social Deployment of the “OtonoVR-New Music Viewing Experience” App
サブタイトル(和)
キーワード(1)(和/英) 音場合成 / Sound field synthesis
キーワード(2)(和/英) マイクロホンアレイ / Microphone array
キーワード(3)(和/英) マルチチャネルサラウンド / Multi-channel surround sound
キーワード(4)(和/英) 360度動画 / 360-degree video
キーワード(5)(和/英) インタラクティブ視聴 / Interactive viewing
キーワード(6)(和/英) ユーザセントリックエンタテインメント / User-centric entertainment
第 1 著者 氏名(和/英) 堀内 俊治 / Toshiharu Horiuchi
第 1 著者 所属(和/英) KDDI総合研究所(略称:KDDI総合研究所)
KDDI Research(略称:KDDI Research)
発表年月日 2021-11-15
資料番号 EA2021-46,EMM2021-73
巻番号(vol) vol.121
号番号(no) EA-246,EMM-247
ページ範囲 pp.108-113(EA), pp.108-113(EMM),
ページ数 6
発行日 2021-11-08 (EA, EMM)