AIはベートーベンの未完の第10交響曲を完成させました。これがどのように聞こえるかです

Sep 27 2021
有名な作曲家ルートヴィヒ・フォン・ベートーベンが亡くなり、彼の第10交響曲のためにほんの数音を残しました。200年以上後、科学者は人工知能を使用して仕事を終えました。
ドイツの作曲家ルートヴィヒ・フォン・ベートーベンは、1810年頃に弦楽四重奏を指揮しています。芸術家ボルクマンによって描かれました。リシュギッツ/ゲッティイメージズ

ルートヴィヒ・フォン・ベートーベンが1827年に亡くなったとき、彼は彼の最高傑作として多くの人に予告された作品である交響曲第9番の完成から3年が経過しました。彼は第10交響曲の制作を始めましたが、健康状態が悪化したため、あまり前進できませんでした。彼が残したのは音楽のスケッチだけでした。

それ以来、ベートーベンのファンや音楽学者は、何があったのかと戸惑い、嘆き悲しんでいます。彼のメモは、永遠に手の届かないように見えたものの、いくつかの壮大な報酬でからかわれました。

今、音楽史家、音楽学者、作曲家、コンピューター科学者のチームの仕事のおかげで、ベートーベンのビジョンが実現します。

私はプロジェクトの人工知能の側面を主宰し、ベートーベンの仕事全体と彼の創造的なプロセスの両方を機械に教えた創造的なAIスタートアップPlayformAIの科学者のグループを率いました。

ベートーベンの第10交響曲の完全な録音は、ドイツのボンで行われる予定の世界初演と同じ日に、2021年10月9日にリリースされる予定です。これは2年以上の努力の集大成です。

過去の試みが壁にぶつかる

1817年頃、ロンドンのロイヤルフィルハーモニー協会は、ベートーベンに9番目と10番目の交響曲の作曲を依頼しました。オーケストラのために書かれた交響曲には、多くの場合4つの楽章が含まれます。最初の楽章は速いテンポで、2番目の楽章は遅いテンポで、3番目の楽章は中速または速いテンポで、最後の楽章は速いテンポで演奏されます。

ベートーベンは1824年に交響曲第9番を完成させ、時代を超えた「喜びへのオード」で締めくくりました。

しかし、第10交響曲に関しては、ベートーベンは、いくつかの音符と彼が書き留めたいくつかのアイデアを除いて、あまり残していませんでした。

ベートーベンの第10交響曲の一部を再構築するための過去の試みがいくつかありました。最も有名なのは、1988年に、音楽学者のバリー・クーパーが第1および第2の運動を完了するために冒険したことです。彼はスケッチから250小節の音楽を組み合わせて、ベートーベンのビジョンに忠実な最初のムーブメントの制作であると彼の見解で作成しました。

しかし、ベートーベンのスケッチがまばらであるため、交響曲の専門家はその最初の楽章を超えることはできませんでした。

チーム結成

2019年の初めに、オーストリアのザルツブルクにある音楽技術を推進する組織であるKarajanInstituteの所長であるDr.MatthiasRöderから連絡がありました。彼は、作曲家の250歳の誕生日を祝って、ベートーベンの第10交響曲を完成させるためにチームを編成していると説明しました。意識AI-生成された芸術上の私の仕事、彼はAIがベートーベンが残した空白のヘルプ埋めるためにできるようになるかどうかを知りたかったです。

挑戦は気が遠くなるようでした。それを実現するには、AIはこれまでに行ったことのないことを行う必要があります。しかし、私はそれを試してみると言いました。

その後、ローダーはオーストリアの作曲家ウォルター・ワーゾワを含むチームを編成しました。Intelのシグネチャーボンジングルを書くことで有名なWerzowaは、ベートーベンが残したものとAIが生成するものを統合する新しい種類の構成をまとめることを任されました。計算音楽の専門家であるマークゴッサムは、ベートーベンのスケッチを書き写し、AIを適切にトレーニングできるように、彼の作品全体を処理する取り組みを主導しました。

チームには、ハーバード大学の音楽学者であり、たまたま素晴らしいピアニストでもあるロバート・レヴィンも含まれていました。レビンは以前、モーツァルトとヨハン・セバスチャン・バッハによる18世紀の不完全な作品を数多く完成させていました。

プロジェクトが形になります

2019年6月、グループはハーバードの音楽図書館で2日間のワークショップに集まりました。ピアノ、黒板、ベートーベンの既知の作品のほとんどにまたがるスケッチブックの山がある広い部屋で、断片を完全な音楽に変える方法と、AIが忠実でありながらこのパズルを解くのにどのように役立つかについて話しました。ベートーベンのプロセスとビジョンに。

部屋の音楽の専門家は、AIが過去に作成した音楽の種類についてもっと知りたがっていました。AIがバッハのスタイルで音楽をうまく生成した方法を彼らに話しました。しかし、これはバッハのように聞こえる入力されたメロディーの調和にすぎませんでした。それは私たちがしなければならないことに近づきませんでした:一握りのフレーズから交響曲全体を構築します。

2019年12月13日、ドイツのボンにあるテレコム本社で、人工知能を使用して作られたベートーベンの第10交響曲の一部をピアノ奏者と弦楽四重奏が演奏します。

その間、部屋の科学者(私も含めて)は、どのような種類の資料が利用可能であり、専門家がそれらを使用して交響曲を完成させることをどのように想定していたかについて知りたいと考えました。

手元のタスクは最終的に結晶化しました。ベートーベン自身が書いたかもしれない何かを作成するには、ベートーベンの作品全体からのメモと完成した作曲を、第10交響曲から入手可能なスケッチとともに使用する必要があります。

これは途方もない挑戦でした。スケッチを送り、ボタンを押して交響曲を吐き出すことができる機械がありませんでした。当時利用可能なほとんどのAIは、数秒を超えて未完成の音楽を続けることができませんでした。

ベートーベンの創造的なプロセスを機械に教えることで、創造的なAIができることの限界を押し上げる必要があります。ベートーベンが数小節の音楽を取り、それらを刺激的な交響曲、カルテット、ソナタに丹念に発展させる方法です。

ベートーベンの創造的プロセスをつなぎ合わせる

プロジェクトが進むにつれて、コラボレーションの人間側と機械側が進化しました。ヴェルゾワ、ゴッサム、レビン、ローダーは、ベートーベンの意図を理解しようとして、第10交響曲のスケッチを解読して転写しました。彼の完成した交響曲をテンプレートとして使用して、彼らはスケッチの断片がどこに行くべきか、つまりどの動き、動きのどの部分に行くべきかというパズルをつなぎ合わせようとしました。

彼らは、スケッチがスケルツォの出発点を示しているかどうかを判断するなどの決定を下さなければなりませんでした。スケルツォは、通常、第3楽章で交響曲の非常に活気のある部分です。あるいは、音楽のラインがフーガの基礎である可能性が高いと判断するかもしれません。フーガは、すべてが中心的なテーマを反映するパーツを織り交ぜることによって作成されたメロディーです。

プロジェクトのAI側、つまり私の側は、さまざまな困難なタスクに取り組んでいることに気づきました。

まず、そして最も基本的に、ベートーベンが行ったように、短いフレーズ、または単なるモチーフを取得し、それを使用してより長く、より複雑な音楽構造を開発する方法を理解する必要がありました。たとえば、ベートーベンが基本的な4音のモチーフから第5交響曲をどのように構築したかを機械が学習する必要がありました。

次に、フレーズの続きもスケルツォ、トリオ、フーガなどの特定の音楽形式に従う必要があるため、AIはこれらの形式を開発するためのベートーベンのプロセスを学習する必要がありました。

やることリストが増えました。AIにメロディーラインを取り、それを調和させる方法を教える必要がありました。AIは、音楽の2つのセクションをつなぐ方法を学ぶ必要がありました。そして、AIがコーダを作成できる必要があることに気づきました。コーダは、音楽の一部を結論に導くセグメントです。

最後に、完全な構成ができたら、AIはそれをオーケストレーションする方法を理解する必要がありました。これには、さまざまなパーツにさまざまな楽器を割り当てることが含まれます。

そして、ベートーベンがそうするかもしれない方法でこれらの仕事をやめなければなりませんでした。

最初のビッグテストに合格

2019年11月、チームは再び直接会いました。今回はボンで、作曲家が生まれ育ったベートーベンハウスミュージアムで会いました。

この会議は、AIがこのプロジェクトを完了できるかどうかを判断するためのリトマス試験でした。AIが開発し、ベートーベンの10番目のスケッチから作成した楽譜を印刷しました。ピアニストは、ジャーナリスト、音楽学者、ベートーベンの専門家のグループの前で、美術館の小さなコンサートホールで演奏しました。

ベートーベンのフレーズがどこで終わり、AIの外挿がどこから始まったかを判断するように聴衆に呼びかけました。彼らはできませんでした。

数日後、これらのAIで生成されたスコアの1つが、記者会見で弦楽四重奏によって演奏されました。ベートーベンの第10交響曲のスケッチをよく知っている人だけが、AIで生成されたパーツがいつ入ってくるかを判断できました。

これらのテストの成功は、私たちが正しい方向に進んでいることを示しています。しかし、これらはほんの数分の音楽でした。やるべきことはまだまだたくさんありました。

世界の準備ができて

あらゆる点で、ベートーベンの天才が迫り、私たちにもっと良いことをするように挑戦しました。プロジェクトが進化するにつれて、AIも進化しました。その後の18か月間で、1つあたり20分を超える2つのムーブメント全体を構築および調整しました。

芸術はAIから立ち入り禁止であるべきであり、AIには人間の創造的なプロセスを再現しようとするビジネスはないと言う人たちが、この作業にいくらかの反発を予想しています。しかし、アートに関して言えば、AIは代替品ではなく、ツールとして、つまりアーティストが新しい方法で自分自身を表現するための扉を開くものだと考えています。

このプロジェクトは、人間の歴史家や音楽家の専門知識がなければ実現できなかったでしょう。この目標を達成するには、膨大な量の作業、そしてもちろん、創造的な思考が必要でした。

ある時点で、チームの音楽専門家の1人は、AIは、毎日練習し、学び、そしてますます良くなる熱心な音楽学生を思い出させたと言いました。

ベートーベンからバトンを受け取ったその学生は、第10交響曲を世界に提示する準備ができています。

Ahmed Elgammalは、ラトガーズ大学のコンピューターサイエンス学部の教授であり、ラトガーズのアート&AIラボのディレクターです。

この記事は、クリエイティブコモンズライセンスの下で会話から再発行されています。あなたは見つけることができます元の記事をここに。