Когда Людвиг фон Бетховен умер в 1827 году, ему было три года от даты завершения его Девятой симфонии, произведения, которое многие провозгласили его великим произведением. Он начал работу над своей 10-й симфонией, но из-за ухудшения здоровья не смог добиться больших успехов: все, что он оставил, это несколько музыкальных зарисовок.
С тех пор поклонники Бетховена и музыковеды ломали голову и сетовали на то, что могло бы быть. Его записи дразнили какую-то великолепную награду, хотя и казавшуюся недосягаемой навсегда.
Теперь, благодаря работе группы историков музыки, музыковедов, композиторов и компьютерных ученых, видение Бетховена воплотится в жизнь.
Я руководил проектом, связанным с искусственным интеллектом, возглавляя группу ученых в творческом стартапе Playform AI, который обучал машину как всей работе Бетховена, так и его творческому процессу.
Полная запись 10-й симфонии Бетховена должна быть выпущена 9 октября 2021 года, в тот же день, когда состоится мировая премьера выступления в Бонне, Германия, и станет кульминацией более чем двухлетней работы.
Прошлые попытки натолкнуться на стену
Примерно в 1817 году Королевское филармоническое общество в Лондоне поручило Бетховену написать Девятую и десятую симфонии. Написанные для оркестра симфонии часто содержат четыре части : первая исполняется в быстром темпе, вторая - в более медленном, третья - в среднем или быстром темпе, а последняя - в быстром темпе.
Бетховен завершил Девятую симфонию в 1824 году, которая завершается вечной « Одой радости ».
Но когда дело дошло до 10-й симфонии, Бетховен не оставил ничего, кроме некоторых нот и нескольких идей, которые он записал.
В прошлом были попытки реконструировать части 10-й симфонии Бетховена. В 1988 году музыковед Барри Купер решился завершить первую и вторую части. Он сплел 250 музыкальных тактов по эскизам, чтобы создать то, что, по его мнению, было произведением первой части , верной видению Бетховена.
Тем не менее, скудность набросков Бетховена не позволила специалистам по симфонии выйти за рамки этой первой части.
Сборка команды
В начале 2019 года со мной связался доктор Маттиас Рёдер, директор Института Караяна , организации в Зальцбурге, Австрия, которая занимается продвижением музыкальных технологий. Он объяснил, что собирает команду для завершения 10-й симфонии Бетховена в честь 250-летия композитора. Зная о моей работе над искусством , созданным с помощью ИИ , он хотел знать, сможет ли ИИ помочь заполнить пробелы, оставленные Бетховеном.
Вызов казался устрашающим. Чтобы добиться этого, ИИ должен будет сделать то, чего он никогда раньше не делал. Но я сказал, что попробую.
Затем Рёдер собрал команду, в которую входил австрийский композитор Вальтер Верцова. Известный тем, что написал фирменный джингл для бонгов Intel , Верзова получила задание создать новый вид композиции, которая объединила бы то, что оставил Бетховен, с тем, что будет генерировать ИИ. Марк Готэм , эксперт по компьютерной музыке, возглавил работу по расшифровке набросков Бетховена и обработке всей его работы, чтобы ИИ мог быть должным образом обучен.
В команду также входил Роберт Левин , музыковед из Гарвардского университета, который также оказался невероятным пианистом. Левин ранее закончил ряд неполных произведений 18-го века Моцарта и Иоганна Себастьяна Баха .
Проект обретает форму
В июне 2019 года группа собралась на двухдневный семинар в музыкальной библиотеке Гарварда. В большой комнате с пианино, классной доской и стопкой альбомов Бетховена, охватывающих большинство его известных работ, мы говорили о том, как фрагменты можно превратить в законченное музыкальное произведение и как ИИ может помочь решить эту головоломку, оставаясь при этом верным. к процессу и видению Бетховена.
Музыкальные эксперты в зале стремились узнать больше о музыкальном искусстве, созданном в прошлом. Я рассказал им, как искусственный интеллект успешно создавал музыку в стиле Баха . Однако это была лишь гармонизация введенной мелодии, которая звучала как Бах. Это не приблизилось к тому, что нам нужно было сделать: построить целую симфонию из нескольких фраз.
Между тем, находившиеся в зале ученые, в том числе и я, хотели узнать, какие материалы были доступны и как эксперты предполагали использовать их для завершения симфонии.
В конечном итоге поставленная задача кристаллизовалась. Нам нужно будет использовать заметки и законченные композиции из всей работы Бетховена - наряду с доступными набросками из 10-й симфонии - чтобы создать что-то, что, возможно, написал сам Бетховен.
Это был огромный вызов. У нас не было машины, на которую мы могли бы скармливать скетчи, нажимать кнопку и заставлять ее выдавать симфонию. Большинство доступных в то время ИИ не могли продолжить незавершенное музыкальное произведение дольше нескольких дополнительных секунд.
Нам нужно будет раздвинуть границы того, что может делать творческий ИИ, обучая машину творческому процессу Бетховена - тому, как он берет несколько музыкальных тактов и кропотливо превращает их в захватывающие симфонии, квартеты и сонаты.
Соединяя творческий процесс Бетховена воедино
По мере развития проекта человеческая и машинная стороны сотрудничества развивались. Верзова, Готэм, Левин и Рёдер расшифровали и переписали отрывки из 10-й симфонии, пытаясь понять намерения Бетховена. Используя его завершенные симфонии в качестве шаблона, они попытались собрать воедино головоломку о том, куда должны идти фрагменты эскизов - какое движение, какая часть движения.
Им приходилось принимать решения, например определять, указывает ли эскиз на отправную точку скерцо , которое является очень живой частью симфонии, как правило, в третьей части. Или они могут решить, что музыкальная линия, вероятно, была основой фуги , которая представляет собой мелодию, созданную путем переплетения частей, которые все перекликаются с центральной темой.
ИИ-сторона проекта - моя сторона - столкнулась с рядом сложных задач.
Во-первых, и самое главное, нам нужно было выяснить, как взять короткую фразу или даже просто мотив и использовать ее для создания более длинной и сложной музыкальной структуры, как это сделал бы Бетховен. Например, машина должна была научиться тому, как Бетховен построил Пятую симфонию из основного четырех нотного мотива .
Далее, поскольку продолжение фразы также должно следовать определенной музыкальной форме, будь то скерцо, трио или фуга, ИИ должен был изучить процесс Бетховена для развития этих форм.
Список дел рос: мы должны были научить ИИ брать мелодическую линию и согласовывать ее. ИИ нужно было научиться соединять два музыкальных фрагмента вместе. И мы поняли, что ИИ должен уметь составлять код , то есть сегмент, завершающий часть музыкального произведения.
Наконец, как только у нас будет полная композиция, ИИ должен будет выяснить, как ее оркестровать, что включает в себя назначение разных инструментов для разных частей.
И он должен был выполнять эти задачи так, как мог бы это делать Бетховен.
Прохождение первого большого испытания
В ноябре 2019 года коллектив снова встретился лично - на этот раз в Бонне, в доме-музее Бетховена, где родился и вырос композитор.
Эта встреча стала лакмусовой бумажкой для определения того, сможет ли ИИ завершить этот проект. Мы напечатали музыкальные партитуры, разработанные AI по эскизам 10-го произведения Бетховена. Пианист выступил в небольшом концертном зале музея перед группой журналистов, музыковедов и знатоков Бетховена.
Мы предложили аудитории определить, где заканчиваются фразы Бетховена и где начинается экстраполяция ИИ. Они не могли.
Несколькими днями позже одна из этих созданных искусственным интеллектом партитур была воспроизведена струнным квартетом на пресс-конференции . Только те, кто хорошо знал наброски Бетховена к 10-й симфонии, могли определить, когда появились части, созданные искусственным интеллектом.
Успех этих тестов показал нам, что мы на правильном пути. Но это были всего пара минут музыки. Предстояло еще много работы.
Готовы к миру
В каждом моменте маячил гений Бетховена, побуждая нас делать лучше. По мере развития проекта ИИ тоже. В течение следующих 18 месяцев мы построили и оркестровали две полные части продолжительностью более 20 минут каждая.
Мы ожидаем некоторого отпора этой работе - тех, кто скажет, что искусство должно быть запрещено ИИ, и что ИИ не имеет права пытаться воспроизвести творческий процесс человека. Но когда дело доходит до искусства, я рассматриваю ИИ не как замену, а как инструмент, открывающий художникам двери для самовыражения по-новому.
Этот проект был бы невозможен без опыта историков и музыкантов. Для достижения этой цели потребовался колоссальный объем работы и, конечно, творческого мышления.
В какой-то момент один из музыкальных экспертов в команде сказал, что ИИ напомнил ему энергичного студента-музыканта, который практикуется каждый день, учится и становится все лучше и лучше.
Теперь этот студент, принявший эстафету от Бетховена, готов представить миру 10-ю симфонию.
Ахмед Эльгаммал - профессор факультета компьютерных наук Университета Рутгерса и директор лаборатории искусства и искусственного интеллекта в Рутгерском университете.
Эта статья переиздана из The Conversation по лицензии Creative Commons. Вы можете найти оригинальную статью здесь.