Suno, Riffusion и академическая музыка
Когда музыкальные нейросети только появились, я относилась к этой затее крайне скептически, чтобы не сказать - отрицательно. Их возможности совершенно не впечатляли. Какие-то унылые, примитивные, средненькие песенки, вдобавок куцые - на минутку звучания. Бесплатные версии выглядели совсем убого, а платить за такое качество совершенно не хотелось.
Меня не устраивали ни Mubert, ни Udio, ни AIVA. Возможности везде ограниченные, а ограничений много, и нужного результата мне получить не удалось.
Бредовая картинка от Дезго. Примерно как те песенки.
Потом в мир нейросетей ворвалась непревзойденная до сих пор SUNO.
И я ею начала пользоваться для своих литературно-творческих целей: создать заставки и фоновые треки для аудиоверсий своих книг (космоопера "Хранительница") и музыкальные номера, в том числе песни, для некоторых глав, где в тексте упоминается либо звучание музыки, либо приводятся стихи, которые так и тянет спеть.
Некоторые опыты я тут выкладывала.
Песни инопланетян от нейросети SUNOНаука и фантастика26 июля 2024
Звезда Маир и нейросетиНаука и фантастика9 сентября 2024
Фэнтези внутри космооперыНаука и фантастика21 декабря 2024
Марсианская поэтесса и космоопераНаука и фантастика3 января
Нейросеть состязается с Римским-КорсаковымНаука и фантастика1 февраля
Нейросеть, Шуберт и ГейнеНаука и фантастика18 февраля
Мрачный Лермонтов и нейросетьНаука и фантастика7 марта
Но Suno начала то ли портиться, то ли взбрыкивать. Раньше в бесплатной версии, где дается 50 кредитов (это 5 попыток по 2 варианта сразу), иногда удавалось сходу добиться желаемого. В последнее время вся продукция уходит в шлак. Suno отказывается следовать промпту, где, например, ясно указана тональность (мажор или минор), тип голоса, инструментовка (мне эта сеть всё время подкидывает рояль, который мне обычно вообще не нужен - так что я сразу пишу арфу, но это не всегда спасает).
А главное, даже продвинутая Suno скверно ориентируется в академической музыке. Барокко, классика, итальянская опера - всё выходит грубо и примитивно, иногда просто ужасно. Довольно сносно - немецкая Lied шубертовского склада. Тут бывают удачи.
Какой спрос с машины, если ей скормили огромное количество музыки совсем другого плана? Кто-то подсчитал и выложил в сеть названия всех стилей, которыми богата SUNO - их там порядка 870, но академических - от силы три-четыре, и те названы предельно абстрактно (classical).
Зачем мне в космоопере академическая музыка?
Затем, что привычная массам эстрада, рок, хип-хоп и прочая музыка для автомобилей и дискотек тут категорически не подходит.
- Во-первых, я сама всё это терпеть не могу.
- Во-вторых, мои герои живут не на Земле, и многие из них вообще инопланетяне. Музыка у них есть, но - не такая, какая звучит здесь и сейчас вокруг нас.
На свою голову, я ввела в космооперу, начиная с книги "Наследник", гениального музыканта-инопланетянина, "уйлоанского Моцарта", принца Ульвена. Да, его учат музыке земные наставники, два барона Ризеншнайдера, однако мыслит он гораздо шире и свободнее. Может и песенку сочинить, а может и нечто совсем изысканное - электронную композицию "Металлический астероид", первую в истории Тиатары оперу "Улливен и Ниссоа", ораторию с использованием мультимедиа...
И вот с этим репертуаром у нейросетей не заладилось. Хотя отдельные удачи иногда случались.
Одним из ноу-хау стал уйлоанский язык. Я не придумывала ни целостный словарь, ни грамматику - просто наобум писала тексты в желаемой фонетике.
SUNO довольно чётко воспроизводит типичные вокальные приёмы и интонации, свойственные лёгкой музыке разных стран. По этой причине я избегаю предлагать ей русские тексты - душок шансона, советской песни или эстрадной цыганщины бывает невыносим.
Но в других языковых сферах тоже не всё хорошо: чувственные придыхания, намёки на интимную искушённость, чередование усталой пресыщенности (шепоток) с надрывной истерикой - такое бывает и на английском, и на немецком.
На условном уйлоанском языке всего этого гораздо меньше, и национальной окрашенности почти нет, или она не столь ясно узнаваемая.
Riffusion
Мне порекомендовали также сеть Riffusion - она пока бесплатная.
Кое в чем - на одном уровне с SUNO, кое в чем даже лучше, но удачные опыты, если такие случаются, по яркости материала уступают SUNO.
Иногда я интереса ради давала одинаковые промпты обеим нейросетям, и Riffusion нередко справлялась с ними более убедительно, чем SUNO.
Но беда та же самая: я не смогла выудить из этой нейросети что-либо не в песенной форме (строфической или куплетной), не в традиционных мажорных и минорных тональностях, не в узнаваемых жанрах (вальс, полька, марш, и т.д.), не в банальной фактуре (арпеджио фортепиано, аккорды гитары, и т.д.).
Мелодика у Riffusion тоже более блеклая, чем в лучших образцах SUNO.
В общем, нейросетям расти и расти.
Композиторы могут успокоиться: для фонового сопровождения искусственная музычка годится, но к творчеству она не относится.