Udio - еще один генератор музыки на основе ИИ

Цитата (zey @ 5.03.2025 - 15:21)

Облака (neoclassical version)

О, нью-эйдж + хороший женский вокал + хор Минина = отличная песня). Интересный переход реализован: к женскому вокалу в конце первого куплета присоединяется хор и затем припев продолжает только хор.

Цитата

нтересный переход реализован: к женскому вокалу в конце первого куплета присоединяется хор и затем припев продолжает только хор.

Мне всё же слышится больше дискант, причём мальчика). Ну да ладно. Появился он в конце обратного прогона трэка, до этих детских «голосов» вообще не слышно было, поэтому звучало это всё ближе к «грегорианскому хору». В общем собирать его пришлось трижды, ну и много пришлось поработать с разбивкой строк, чтоб более протяжно и «живее» получилось. Интересно вышло со словом пожалуйста, букву Й пришлось исключить, чтобы без акцента «пропевало», так что не всегда правильно написанные слова правильно звучат).

Цитата (zey @ 8.03.2025 - 08:14)

Интересно вышло со словом пожалуйста, букву Й пришлось исключить, чтобы без акцента «пропевало», так что не всегда правильно написанные слова правильно звучат).

Ага, есть такое, иногда тоже правлю.

Респект и Уважуха!!!. Отлично прописал Вокал, это прям открытие нового уровня в генерации. Послушал сегодня уже 3 раза. Очень живой голос получился, прям как настоящий. Супер.

Цитата (zey @ 8.03.2025 - 20:19)

Очень живой голос получился, прям как настоящий.

Собрал новый промт и решил тестануть, как будет все звучать. За несколько дней сделал около сотни проб на первый куплет. В итоге из всего получилось четыре годных варианта. Затем добавил припев и стало понятно, что только один вариант рабочий, остальные пошли в утиль. Так и появилась эта песня. Кстати, на этом промте часто получаются более-менее чистые, естественные голоса. Такие же получаются на промте которым сделал песню “Три звездных коня”. С чем это связанно я не знаю, вроде промты как промты.

Цитата

Собрал новый промт и решил тестануть

Вот можно поподробнее, чего за Промт, делись с общественностью). Ну и дефисы же раставлял на припевеве, чтоб распевка хорошо шла?

Я то вот почему ушел на хоровую тематику, что бы научится с голосом работать. Хоровые промты максимально заточены под генерацию голоса. Я вот щас партитурами хоровыми начал кормить модель, интересный опыт однако, думаю пригодится в дальнейшем для устранения дефектов
Это сообщение отредактировал zey - 9 мар 2025 в 10:08

Цитата (zey @ 9.03.2025 - 10:01)

Вот можно поподробнее, чего за Промт, делись с общественностью). Ну и дефисы же раставлял на припевеве, чтоб распевка хорошо шла?

Да обычный промт, выглядит вот так: female vocalist, pop, rock, melodic, electronic, bittersweet, electropop, introspective, soft, alternative rock, synthpop, lush, atmospheric, melancholic, emotional, instrumental. Дефисы в припеве не ставил.
Промты собираю просто, например услышал мелодию (Boy Harsher – Pain) и хочу трек с подобной атмосферой, смотрю в каком жанре сделан и прописываю в Udio начальный короткий промт: darkwave, synthwave, minimal synth, female vocalist (обязательно прописываю первый куплет песни). Всё, дальше делаю несколько десятков проб и смотрю какая из проб больше подходит по стилю вышеуказанного трека. Например, одна из генераций получается с нужной мне атмосферой (на голос даже не смотрю, кривой, косой получился, это пока не важно). Открываем эту генерацию и смотрим на промт который сделал сам Udio, основываясь на мой короткий промт. Вот этот промт беру и дальше работаю только с ним, делаю снова кучу генераций с первым куплетом и выбираю лучшие на мой взгляд. Первый куплет будет базой для всего трека.

Цитата

Да обычный промт, выглядит вот так: female vocalist, pop, rock, melodic, electronic, bittersweet, electropop, introspective, soft, alternative rock, synthpop, lush, atmospheric, melancholic, emotional, instrumental.

Довольно таки подробный

Цитата

смотрю в каком жанре сделан и прописываю

Скоро появятся нейронки которые более точно будут определять жанры музыки , демки в открытом доступе вроде даже есть уже, если чего наковыряю полезного по этой теме выложу
Это сообщение отредактировал zey - 11 мар 2025 в 10:52

https://audioaidynamics.com/genre-finder
Это сообщение отредактировал zey - 11 мар 2025 в 11:52

Cyanite.ai И в проекте Convolutional Neural Networks for Live Music Genre Recognition, много инфы есть на английском в том числе ссылки на демки, но они не работают. audioaidynamics погонял, вроде бы и не плохо, но пока неоднозначно)

Цитата

Первый куплет будет базой для всего трека.

А я наоборот делаю базой припев ( в большинстве случаев)). И вокруг припевов потом пляшу с куплетами),

А кто знает, сколько может быть разных припев в структуре Трэка? Столкнулся с проблемой, не хочет три разных припева делать собака сутулая)

Цитата (zey @ 12.03.2025 - 20:38)

А кто знает, сколько может быть разных припев в структуре Трэка? Столкнулся с проблемой, не хочет три разных припева делать собака сутулая)

На сколько разные? Слова или мелодия припева?

Слова разные, так то решил уже как быть) сделал склейку, не спортивно конечно, но да ладно. По итогу даже не знаю стоит ли выкладывать. Прихотнулось сделать кавер на гражданскую оборону "На наших глазах" , ковырял сначала в нью эдже, но как то скучновато было, добавил немножко металла в этот скучный коктель, получилось что типа сифмонического рока) уже веселее, но мне сложно оценить это творение. Если хочешь могу выложить)
Это сообщение отредактировал zey - 13 мар 2025 в 19:29

Цитата (zey @ 18.02.2025 - 12:41)

Давно была идея сделать джазовый, слегка абсурдный кавер на всем известную с детства песню. Видеоряд runway с предварительным апскейлом и удалением ненужного в aiease.ai.

Хм, прямо зашло , круто реально. Инструментал и голос и видеоряд, вообще без косяков практически. 99% не поймут , что нейронка , даже под коммерческое качество подходит , чуть со сведением поработать и с мастерингом.

Цитата

Хм, прямо зашло , круто реально. Инструментал и голос и видеоряд, вообще без косяков практически. 99% не поймут , что нейронка , даже под коммерческое качество подходит , чуть со сведением поработать и с мастерингом.

Спасибо за отзыв, стараемся как можем, но не всегда получается) учимся в процессе так сказать.

Цитата (zey @ 13.03.2025 - 19:28)

Слова разные, так то решил уже как быть) сделал склейку, не спортивно конечно, но да ладно. По итогу даже не знаю стоит ли выкладывать. Прихотнулось сделать кавер на гражданскую оборону "На наших глазах" , ковырял сначала в нью эдже, но как то скучновато было, добавил немножко металла в этот скучный коктель, получилось что  типа сифмонического рока) уже веселее, но мне сложно оценить это творение. Если хочешь могу выложить)

Ну, у Udio алгоритм, если один раз сделал припев, то этот припев зачастую будет прописываться и дальше в повторениях, где поставишь [Chorus]. Можно в следующий раз попробовать прописать [Chorus1], [Chorus2], [Chorus3].

Давай выкладывай, заценим.

Номера припевов ставил, но только пару раз подцепило, но неудачно, поэтому сделал склейку с удачной генерации .вот что вышло

Цитата

Я вот щас партитурами хоровыми начал кормить модель, интересный опыт однако,

В общем повозился с дефисами и вот что могу сказать .На правильность исполнения в целом влияет ( для хора), но с правильно подобранным промтом всё же лучше результат даст, но зато можно дефисами добавить акцента. Также в целом стало очевидным что дефисы и ударения, полностью выводят систему контроля за соблюдением авторских прав) так что если нельзя, но очень хочется, то можно просто раставить ударения и каверить на здоровье

Цитата (zey @ 13.03.2025 - 21:39)

вот что вышло

Так это же epic metal opera. Хорошая мелодия, для опенинга аниме зашла бы.

Цитата (zey @ 13.03.2025 - 21:54)

Также в целом стало  очевидным что дефисы и ударения, полностью выводят систему контроля за соблюдением авторских прав) так что если нельзя, но очень хочется, то можно просто раставить ударения и каверить на здоровье

Я так восьмиклассницу группы Кино делал. Кое как доделал, Udio все равно ругался время от времени. Вообще удивлен был, что тексты Кино нельзя использовать.