Сравнение хип-хоп-сэмплинга и извлечения данных для искусства

«Когда текстовое приглашение оживает, как вы и предполагали, это похоже на волшебство. Когда технологии кажутся волшебством, темпы внедрения быстро растут». — Чарли Варзел

Изображение выше было создано с помощью Midjourney AI, проприетарной программы искусственного интеллекта, которая создает изображения из текстовых описаний, аналогично DALL-E от OpenAI и Stable Diffusion с открытым исходным кодом. Он работает путем очистки Интернета и замены текста на пиксели от «ботов» ИИ, обученных на тысячах изображений.

Как только это стало «всеобщей яростью», критики вышли из-под пера, но я подумал, что процесс создания изображений с использованием Midjourney и других инструментов искусственного интеллекта напомнил мне сэмплирование в хип-хопе. В частности, мне вспомнился альбом All Samples Cleared покойного Биз Марки . Сэмплер — это электронное устройство, которое записывает, изменяет и воспроизводит цифровой звук. Он использует цифровые образцы реальных инструментов, фрагменты песен или звуковые эффекты для создания музыки.

Биз попробовал отрывок из песни «Alone Again (Naturally)» певца и автора песен Гилберта О'Салливана в треке «Alone Again» из третьего альбома Марки I Need a Haircut . Марки и его продюсерская и звукозаписывающая компании были указаны в качестве соответчиков с Warner Bros. в судебном процессе.

Судебное дело оказало большое влияние на хип-хоп музыку. Плата за оформление образцов запрещала использование более одного или двух образцов для большинства записей, при этом некоторые держатели прав на механическое воспроизведение требовали до 100% гонораров . Поскольку каждый образец должен был быть очищен, чтобы избежать судебного иска, записи, подобные тем, которые были произведены отрядом саперов для Public Enemy , в которых используются десятки образцов, стали чрезмерно дорогими в производстве. — Википедия

Вместо того, чтобы очищать большой набор данных изображений, цифровой сэмплер захватывает фрагменты определенного количества треков (по одной песне за раз). Когда я поступил в аспирантуру SAIC к профессору Шону Декеру, я научился использовать сэмплер (машину) для создания собственных музыкальных треков. Я помню, как сэмплировал песни с большим количеством сэмплов, такие как «I Know You Got Soul» Эрика Б. и Ракима. Результат был похож на звуковой коллаж .

NSynth Super — это AI-эквивалент цифрового сэмплера, который генерирует совершенно новые звуки. Обратной стороной этого процесса является Midjourney. Изображения, сгенерированные из любого количества текстовых подсказок, могут (как в NSynth) быть уникальными: полностью оригинальная композиция, состоящая из фрагментов изображений.

Изображение выше не было сгенерировано с использованием одной фотографии Виолы Дэвис, скорее бот ИИ очистил несколько ее изображений, чтобы создать это. Другими словами, в моей подсказке созданы визуальные элементы, окружающие Виолу. Это визуальный эквивалент цифрового сэмплирования (действительно хорошие продюсеры очень затрудняли идентификацию семплов в треке). Критики спрашивают: «Но разве это искусство?» и я помню, как они говорили то же самое о рэпе 90-х («Это музыка?»).