Новий потужний штучний інтелект Google може перетворювати текст на музику

Музика ШІ

Дослідники Google щойно продемонстрували останні прийоми, яким вони навчили MusicLM, свою модель штучного інтелекту, яка може перетворювати прості текстові підказки на повноцінну музику.

І, судячи зі зразків, якими вони поділилися досі, які варіюються від 30 секунд до цілих п'ятихвилинних треків, це досить вражаюче, але не ідеально, особливо коли йдеться про неелектронні жанри та симуляцію людського тіла. вокал.

Один трек, що особливо плавно звучить, є "основним саундтреком до аркадної гри", а інший інтерпретує "свінг" у моторошній і майже лякаючій роботизованій манері, від якої Дюк Елінгтон може перевернутися в труні.

Дзижчання та свист

Можливо, це не перший інструмент для створення музики — ми навіть не вперше стикаємося з MusicLM, але в останній версії є кілька нових і потужних трюків.

Як докладно описано в документі, який ще не пройшов рецензування, опублікованому дослідниками, ця версія MusicLM "може бути обумовлена ​​як текстом, так і мелодією, оскільки вона може перетворювати свистячі та співаючі мелодії відповідно до описаного стилю у підписі до тексту."

Результати вражають, про що свідчать надані зразки: невелика десятисекундна співуча або засвистувана мелодія легко трансформується у ціле виконання а капела, гітарне соло або виконання струнного квартету. ШІ може навіть перетворити гітарний семпл, що грається пальцями, на спекотний джазовий саксофонний пасаж.

Дослідники стверджують, що це послідовне покращення порівняно з попередніми спробами.

"Наші експерименти показують, що MusicLM перевершує попередні системи як за якістю звуку, так і відповідно до текстового опису", — йдеться в документі, де їх інструмент порівнюється з іншими конкуруючими розробками, такими як Mubert, штучний інтелект, що генерує музику.

Але перш ніж ви запитаєте: ні, дослідники не випускатимуть цей інструмент для широкої публіки з однієї важливої ​​причини: можливість порушення авторських прав чи «можливе незаконне присвоєння творчого контенту», на що музична індустрія вже звертає пильну увагу.

Джерела: The Verge