モーションキャプチャを用いたピアノ演奏動作のCG表現

ピアノ演奏は他の楽器と比較して高速かつ正確な手指の動きが要求されるため,仮想空間でピアノ演奏時の指の動きを表現するには,多大な時間とコスト,技術が必要となります.そこで本研究はモーションキャプチャを用いてこのような問題を解決しました.モーションキャプチャとは,実際の人間の動きを計測し,CGキャラクタで表現する方法として用いられているシステムです. まず,モーションキャプチャを用いてピアノの演奏時の手指の動きを計測します.指の関節部位に光学式マーカを貼って3次元位置情報として取得し,その情報を用いてCGアニメーションとして表現しました.さらにこれを応用し,リアルタイムレンダリングによって,外部から与えられたテンポに対応してピアノCGアニメーションを表現するシステムを構築しました.これによって,ユーザはピアノ演奏時の手指の速度を自在に操ることが可能であり,指揮的な演奏を体感することができます.

動画のダウンロードはこちら (※動画の再生にはWindows Media Playerが必要)

keyboard_arrow_up