Ubah Teks Jadi Lagu
Baru-baru ini, Google memperkenalkan MusicLM yang memungkinkan pengguna mengubah sebuah deskripsi teks menjadi sebuah lagu dari berbagai macam genre.
Model MusicLM memiliki basis data pelatihan yang luas atau sebanyak 280 ribu jam musik sehingga dapat membantu musisi menghasilkan musik dengan variasi dan kedalaman.
"Kami memperkenalkan MusicLM, model yang menghasilkan karya musik tinggi dari deskripsi teks seperti 'melodi biola yang menenangkan didukung oleh riff gitar. MusicLM menampilkan proses pembuatan musik kondisional sebagai tugas pemodelan sequence-to-sequence hierarkis, dan menghasilkan musik pada 24 kHz yang konsisten selama beberapa menit,” menurut publikasi Google di Github.
Mirip dengan bagaimana ChatGPT dapat mengubah perintah teks menjadi sebuah cerita dan DALL-E menghasilkan gambar dari perintah tertulis. Program AI ini dapat mengubah input teks menjadi musik berdurasi hitungan menit.
Hebatnya, teknologi artificial intelligence (AI) MusicLM dapat menggabungkan genre dan instrumen serta menulis trek menggunakan konsep abstrak yang biasanya sulit dipahami komputer. MusicLM dapat memadukan berbagai genre musik seperti rock, pop hingga reggae.
“Audio dihasilkan dengan memberikan urutan perintah teks. Ini memengaruhi bagaimana model melanjutkan token semantik yang berasal dari keterangan sebelumnya, ” kata para peneliti.
Bahkan, MusicLM dapat membuat melodi yang berasal dari senandung, siulan, atau deskripsi sebuah lukisan.
Tentunya, gubahan laku MusicLM tidak sesempurna manusia karena ada beberapa komposisi yang terdengar aneh dan vokalnya cenderung tidak bisa dipahami seperti dikutip Engadget.
Ada juga demo “story mode” di mana model ini pada dasarnya diberikan beberapa input teks dengan durasi waktu untuk setiap jenis musik yang perlu dibuat.
“Eksperimen kami menunjukkan bahwa MusicLM mengungguli sistem sebelumnya baik dalam kualitas audio maupun keakuratan terhadap deskripsi teks. Selain itu, kami mendemonstrasikan bahwa MusicLM dapat dikondisikan pada teks dan melodi yang dapat mengubah melodi siulan dan senandung sesuai dengan gaya yang dijelaskan dalam keterangan teks,” catat para peneliti.
Andalan China