ヤマハは、10月27日から29日にかけて日本科学未来館（東京都江東区）で開催された「デジタルコンテンツEXPO 2017」にて、「みらいのアンサンブル」をテーマに“AI（人工知能）と人間によるライブコンサート”を披露した。
同社が開発した「人工知能合奏システム」と3人の気鋭のアーティストそれぞれが息のあったアンサンブルに挑戦し、その様子の一部を動画で公開している。
通常、人間と機械の共演は、カラオケなどの機械の音声に“人間側が合わせる”ことで成立するが、その場合、表現の機微を機械側に伝えることはできない。
また音楽的なコミュニケーションは抑制され、合奏のダイナミズムは生まれにくくなるという。
こうしたジレンマを解消し、人間の演奏に合わせて“機械が柔軟に演奏を変化させてくれる”のが今回開発となった「人工知能合奏システム」だ。
「人工知能合奏システム」は、人間の演奏をリアルタイムに解析し、どんなテンポやタイミングで伴奏すれば調和の取れた合奏ができるかを瞬時に予測する。
このシステムを自動演奏機能付きピアノと連携させれば、鍵盤やペダルをリアルタイムに操作してぴったりと伴奏を奏でてくれるバーチャルピアニストを再現することができ、他の楽器や音源と連携させれば、様々な楽器のバーチャル共演者を再現することができる。
さらに、このシステムには、影絵を使ってバーチャル奏者の様子を投影する機能が搭載している。
これは人間の合奏プロセスを踏襲した機能で、人間は互いの演奏を“聴く”だけではなく、互いの演奏動作を“見て”調和を図るという仕組みだ。
影絵によってバーチャル奏者の息遣いを視覚的にも伝えることで、より息の合った合奏が実現できるという。
ヤマハはこの技術の先に、AIが演奏会で足りないパートを補ったり、バーチャル音楽教師が演奏をレクチャーしたり、自宅で過去の偉大な演奏家との共演を楽しんだりするといった未来像を思い描いているとのことだ。
