Bugün yatağımda gelişigüzel oturuyordum ve uykum geliyordu ki birdenbire şu mesajı aldım:

Ve beklendiği gibi Google'da arattım ve şok oldum!!

Google'da arattığımda karşılaştığım şey buydu. Sadece başlıktan neyle karşılaşacağımı biliyordum.

Araştırma makalesini inceledim ve çok şaşırdım. Bu harika bir şey.

Nedir ile başlayalım?

MusicLM, Google Research tarafından geliştirilen metin açıklamalarından müzik üretmek için bir yapay zeka modelidir. Birkaç dakika boyunca tutarlı kalan yüksek kaliteli müzik oluşturmak için hiyerarşik bir diziden diziye modelleme yaklaşımı kullanır. Model, "bozulmuş bir gitar riffiyle desteklenen sakinleştirici bir keman melodisi" gibi metin açıklamalarından müzik üretebilir ve hatta hem metin hem de melodiye göre koşullandırılabilir. Bu araştırma, yapay zeka müzik üretimi alanında önemli bir ilerleme sağlıyor ve müzik endüstrisini büyük ölçüde etkileme potansiyeline sahip.

O nasıl çalışır ??

MusicLM, bir metin istemi verildiğinde müzik üretebilen bir makine öğrenimi modelidir. Modelin iki bölümü vardır: (1) ses ve metnin temsili ve belirteçleştirilmesi ve (2) ses temsillerinin hiyerarşik modellemesi.

İlk bölümde, model ses temsillerini çıkarmak için üç farklı model kullanır. İlk model olan SoundStream, aslına uygun müzik sentezi sağlamak için kendinden denetimli ses temsillerini kullanır. İkinci model olan w2v-BERT, uzun bir süre boyunca tutarlı müzik üretmeye yardımcı olmak için semantik belirteçler kullanır. Üçüncü model olan MuLan, metin istemi verilen müziği temsil etmek için kullanılır.

İkinci kısımda, model birinci kısımdan ayrık işitsel sunumları birleştirir ve iki aşamada müzik üretir. İlk aşamada model, MuLan ses belirteçlerini anlamsal belirteçlere eşler. İkinci aşamada model, MuLan ses belirteçleri ve semantik belirteçler verilen akustik belirteçleri üretir. Bu üretim süreci, her aşama için yalnızca kod çözücülü bir Transformatör kullanılarak yapılır.

Çıkarım zamanında model, metin isteminden hesaplanan MuLan metin belirteçlerini koşullandırma sinyali olarak kullanır ve üretilen ses belirteçlerini SoundStream kod çözücüyü kullanarak dalga biçimlerine dönüştürür.

Dünyayı nasıl etkileyecek?

MusicLM'nin müzik dünyası üzerindeki potansiyel etkisi, müzik oluşturma ve analiz etme ile ilgili belirli görevleri otomatikleştirme yeteneğine sahip olduğu için önemli olabilir. Bu, müzik yapmanın ve dağıtmanın yeni ve daha verimli yollarının yanı sıra müzikal eğilimler ve kalıplar hakkında yeni içgörüler sağlayabilir. Bununla birlikte, yapay zeka tarafından üretilen müziğin geliştirilmesinin, yapay zekanın insan yaratıcılığını gerçekten ne ölçüde kopyalayabildiği gibi etik ve yaratıcı soruları gündeme getirdiğine dikkat etmek de önemlidir. MusicLM'nin dünya üzerindeki nihai etkisi, nasıl kullanıldığına ve yapay zeka ve müzik alanında gelecekteki araştırma ve geliştirmelerin yönüne bağlı olacaktır.

Yapay zekanın ne harikalar yaratacağını görmek için cidden sabırsızlanıyorum. 2023'te AI için harika bir başlangıç.

Bu makalenin tüm referansları burada bulunabilir:

• https://google-research.github.io/seanet/musiclm/examples/
• https://arxiv.org/pdf/2301.11325.pdf

Okuduğunuz İçin Teşekkürler , Haftaya Görüşürüz Arkadaşlar.