研究概要：音楽情報処理と身体機能の融合によるアンサンブル演奏システム

キーワード：Human-Computer Interaction、Human Augmentation、音楽理論 GTTM、メロディモーフィング、筋電気刺激

音楽情報処理と身体機能の融合が未来の音楽表現を開拓する。本研究では、演奏者の未来の演奏のコントロールを可能とするインタラクティブなアンサンブル演奏システムの開発を目指しています。このシステムは、メロディをモーフィングする手法を用いて作編曲された楽曲を筋電気刺激 Electrical Muscle Stimulation (EMS) に変換し、手指や足に装着したデバイスによって複数の演奏者の身体動作を同期・制御し、演奏を達成するものです。演奏するメロディのバリエーションは、人が音楽を聴取する知能の仕組みを形式化した理論である Generative Theory of Tonal Music (GTTM) に基づいて作曲され、複数のメロディのセグメントを自由に操作することで、メロディの全体的な構造を保持したまま、装飾音のみを変化させることができます。これまでの音楽構造分析の研究で得られた知見を、Human-Computer Interaction (HCI) および人間拡張 (Human Augmentation)、そして実世界パフォーマンスへ展開することで、人と音楽とのインタラクション、それによって生まれる演奏体験のあり方に新たな可能性を見出すことが期待できます。