| 講演名 | 2007-06-29 ブラインド音源分離と頭部伝達関数を用いた音楽演奏を題材とした自由視聴点コンテンツの制作(ブラインド信号処理/一般) 丹羽 健太, 西野 隆典, 武田 一哉, |
|---|---|
| PDFダウンロードページ |  PDFダウンロードページへ |
| 抄録(和) | 本研究では,ユーザが選択した任意位置における映像,音を視聴することができる自由視聴点TVシステム(Free viewpoint and listening point TV system:FTV)の開発を目指す.本システムでは,任意視点映像の生成には光線空間法を用い,任意聴点音の生成には音源分離技術を用いる.様々な楽器で構成された信号から個々の楽器演奏を抽出し,ユーザが選択した任意位置と演奏者の間に対応する頭部伝達関数を畳み込み,再合成することで,任意聴点音を生成可能である.分離性能が高いほど,定位感のある演奏を聴くことが可能となるが,環境,音源の指向性,観測位置の違いがどのように分離性能に影響するかについて,スピーカを用いた実験で調査した.また,実環境にて楽器演奏を映像・音声を同期収録し,FTVのデモをWEBにて公開する.マイクロホンペア選択型の音源分離手法,及び参照音が得られない実音源に対する評価尺度を提案し,提案手法が楽器演奏に対して高い分離性能を発揮することが示された. |
| 抄録(英) | This paper describes the development of a FTV(Free viewpoint and listening point TV) system on which users can view images and listen to sounds at arbitrary positions. In this system, the ray-space method is used for the arbitrary viewpoint images, and a signal separation method based on frequency-domain independent component analysis is used for the arbitrary listening point sound. For the arbitrary listening point sound, individual musical instrument performances are extracted from the signals composed by various instruments, and users can listen at any arbitrary positions by synthesizing the signals generated by convoluting the separated signals and head-related transfer functions. As separation performances have a influence on auditory lateralization, the experiments to examine how separation performances are influenced by room reverberation, directivity of the sound source, or observation point are conducted using signals transduced by loudspeakers. We also collected the images and the sound signals in a real environment and pubic FTV demonstrations the web. We propose a microphone pair selection-type method and a novel evaluation measure of separation performance in the case we cannot obtain reference signals. As a result, the proposed method were found to be effective for actual musical performance. |
| キーワード(和) | 自由視聴点 / 音源分離 / 周波数領域ICA / 頭部伝達関数 / 音場再現 |
| キーワード(英) | Free viepoint and listening point / SOund source separation / Frequency-domain ICA / Head transfer function / reproduction of acoustic field |
| 資料番号 | EA2007-32 |
| 発行日 |
| 研究会情報 | |
| 研究会 | EA |
|---|---|
| 開催期間 | 2007/6/22(から1日開催) |
| 開催地（和） | |
| 開催地（英） | |
| テーマ（和） | |
| テーマ（英） | |
| 委員長氏名（和） | |
| 委員長氏名（英） | |
| 副委員長氏名（和） | |
| 副委員長氏名（英） | |
| 幹事氏名（和） | |
| 幹事氏名（英） | |
| 幹事補佐氏名（和） | |
| 幹事補佐氏名（英） | |
| 講演論文情報詳細 | |
| 申込み研究会 | Engineering Acoustics (EA) |
|---|---|
| 本文の言語 | JPN |
| タイトル（和） | ブラインド音源分離と頭部伝達関数を用いた音楽演奏を題材とした自由視聴点コンテンツの制作(ブラインド信号処理/一般) |
| サブタイトル（和） | |
| タイトル（英） | Free viewpoint and listening point contents for musical performance using blind signal separation and head related transfer function |
| サブタイトル（和） | |
| キーワード(1)（和/英） | 自由視聴点 / Free viepoint and listening point |
| キーワード(2)（和/英） | 音源分離 / SOund source separation |
| キーワード(3)（和/英） | 周波数領域ICA / Frequency-domain ICA |
| キーワード(4)（和/英） | 頭部伝達関数 / Head transfer function |
| キーワード(5)（和/英） | 音場再現 / reproduction of acoustic field |
| 第 1 著者 氏名（和/英） | 丹羽 健太 / Kenta NIWA |
| 第 1 著者 所属（和/英） | 名古屋大学大学院情報科学研究科 Graduate School of Information Science, Nagoya University |
| 第 2 著者 氏名（和/英） | 西野 隆典 / Takanori NISHINO |
| 第 2 著者 所属（和/英） | 名古屋大学情報メディア教育センター Center for Information Media Studies, Nagoya University |
| 第 3 著者 氏名（和/英） | 武田 一哉 / Kazuya TAKEDA |
| 第 3 著者 所属（和/英） | 名古屋大学大学院情報科学研究科 Graduate School of Information Science, Nagoya University |
| 発表年月日 | 2007-06-29 |
| 資料番号 | EA2007-32 |
| 巻番号（vol） | vol.107 |
| 号番号（no） | 120 |
| ページ範囲 | pp.- |
| ページ数 | 6 |
| 発行日 | |