プレイ中のBGMをリアルタイム生演奏するシステムが贅沢すぎる

これは面白い！
Youtubeネーム「roboband」氏によって公開されたこちらの動画。
「スーパーマリオブラザーズ」や「ゼルダの伝説」などのゲームをプレイすると、そのBGMをリアルタイムにピアノとパーカッションで生演奏してくれます。



既に編集済みのオーディオデータを使って演奏しているという訳ではありません。
プレイ中に出力される音のデータを解析して、それらをピアノやパーカッションの動きに変換することにより、まさにBGMとサウンドエフェクトの生演奏を実現しています。
ピアノには自動演奏機能が充実しているヤマハのディスクラビアを使用し、ソレノイドと呼ばれる往復運動するモーターの一種を使って楽器を動かします。
各モジュールの制御にはRaspberry Piと呼ばれるマイコンボードを使用。
世の中には凄い人がいるものですね。

オーディオデータから実際の楽器を動かすまでにタイムラグが生じて、若干の音ズレが生じていますが、それを踏まえてもゲーム音楽をプレイ中に生演奏できるというのは驚愕です。