| 講演名 | 2012-10-04 Wiimote及びKinectを用いたユーザコントロールを導入した音楽に合った舞踊動作の自動生成(テーマセッション,パターン認識によるインタフェースの未来) 安永 卓哉, 中澤 篤志, 竹村 治雄, |
|---|---|
| PDFダウンロードページ |  PDFダウンロードページへ |
| 抄録(和) | 近年,キャラクターアニメーションに関する研究が数多く行われ,エンターテイメントの分野に応用されている.本稿ではユーザの盛り上がりをWiimoteとKinectを用いて取得し,舞踊アニメーションの動作生成に導入する手法を提案する.モーションキャプチャデータを用いて,ユーザの盛り上がりに同調するようにキャラクタの動きを生成することでユーザとのインタラクティビティを実現する.本手法では,音楽データからは楽曲構造解析によって曲をセグメントに分割し,リズム特徴量を抽出する.モーションキャプチャデータからは,モーションのリズムと盛り上がりを抽出する.これらの解析結果から,音楽のリズムと高い相関を示す動きセグメントを取り出し,モーション遷移グラフを生成する.舞踊生成時はそれぞれのセンサデータから取得したユーザの盛り上がり値とモーションの盛り上がりのマッチングを行い,モーション遷移グラフを探索することで舞踊動作を自動生成する.この手法を用いて,ヴァーチャルキャラクタとインタラクティブにダンスを行えるアプリケーションを開発し,それぞれのインタフェースについて考察を行った. |
| 抄録(英) | This paper presents a new approach for synthesizing dance performance matched to input music, based on the emotional aspects of dance performance. Since the sensor reads express intensities of users' body movements, the system can synthesize character motions whose intensities are synchronized to those of users. Our analysis method extracts motion rhythm and intensity from motion capture data and musical rhythm, structure from musical signals. With the results of this analysis, we generate a motion graph that can generate character motions matched to the musical rhythm. For synthesizing dance performance, we select the motion segment set whose intensity by sensor data and connectivity is matched to that of music segments. As the results, our system adds an interactive component to live dancing performed by virtual characters. |
| キーワード(和) | キャラクターアニメーション / モーションキャプチャ / 音楽解析 / インタラクティブシステム |
| キーワード(英) | character animation / motion capture / music analysis / interactive system |
| 資料番号 | PRMU2012-56 |
| 発行日 |
| 研究会情報 | |
| 研究会 | PRMU |
|---|---|
| 開催期間 | 2012/9/27(から1日開催) |
| 開催地（和） | |
| 開催地（英） | |
| テーマ（和） | |
| テーマ（英） | |
| 委員長氏名（和） | |
| 委員長氏名（英） | |
| 副委員長氏名（和） | |
| 副委員長氏名（英） | |
| 幹事氏名（和） | |
| 幹事氏名（英） | |
| 幹事補佐氏名（和） | |
| 幹事補佐氏名（英） | |
| 講演論文情報詳細 | |
| 申込み研究会 | Pattern Recognition and Media Understanding (PRMU) |
|---|---|
| 本文の言語 | JPN |
| タイトル（和） | Wiimote及びKinectを用いたユーザコントロールを導入した音楽に合った舞踊動作の自動生成(テーマセッション,パターン認識によるインタフェースの未来) |
| サブタイトル（和） | |
| タイトル（英） | Human-Computer Dance Interaction with Real-time Control using Wiimote and Kinect |
| サブタイトル（和） | |
| キーワード(1)（和/英） | キャラクターアニメーション / character animation |
| キーワード(2)（和/英） | モーションキャプチャ / motion capture |
| キーワード(3)（和/英） | 音楽解析 / music analysis |
| キーワード(4)（和/英） | インタラクティブシステム / interactive system |
| 第 1 著者 氏名（和/英） | 安永 卓哉 / Takuya YASUNAGA |
| 第 1 著者 所属（和/英） | 大阪大学大学院情報科学研究科 Osaka University Graduate School of Information Science and Technology |
| 第 2 著者 氏名（和/英） | 中澤 篤志 / Atsushi NAKAZAWA |
| 第 2 著者 所属（和/英） | 科学技術振興機構さきがけ PRESTO, JST |
| 第 3 著者 氏名（和/英） | 竹村 治雄 / Haruo TAKEMURA |
| 第 3 著者 所属（和/英） | 大阪大学サイバーメディアセンター Cybermedia Center, Osaka University |
| 発表年月日 | 2012-10-04 |
| 資料番号 | PRMU2012-56 |
| 巻番号（vol） | vol.112 |
| 号番号（no） | 225 |
| ページ範囲 | pp.- |
| ページ数 | 6 |
| 発行日 | |