Муз. опыты с ИИ / А. Устинов
Архив: 4 Nov 2024 - 20 Feb 2026
AH
AH
AH
20:14
Снежный ком! weights.gg - еще один ресурс. Принимает в "Upload Audio" из YouTube и генерит песни (~30 сек) в манере и с голосом реального артиста (без запрета, как в Suno). Попробовал Стинга / Shape of My Heart. Английский - хорошо, а вот русский с каким-то чешско-польским акцентом. Причем, сам голос не хоровой, как в Suno, но ш/щ торчат... Результат скормил Suno в Audio Input (уже не ругался) - русский хорошо, но голос еще дальше от Стинга. Примеры ниже:
👍
2
AH
20:32
RVC (замена тембра вокалиста) - альтернативный (тому, что у меня в статье) способ получить свой голос в Suno/Udio. Это и раньше было известно (link, link), но теперь выполнить стало проще*. Процедура:
1. Записываем свой голос.
2. Собираем dataset (DS).
3. Создаем модель.
4. В сгенерированной песне разделяем Vocal и Instrumental.
5. Заменяем тембр в вокальном треке на свой.
6. Собираем "свой" Vocal с музыкой... Voila!
Модель (если удачная) используется многократно, т.ч. хлопоты с пп. 1,2,3 - разовые. Конечно, можно сделать модели с разным характером/манерой.
* я рассматриваю упрощенную схему, причем, нигде не придется создавать платные аккаунты.
❤
3
🔥
2
1. Записываем свой голос.
2. Собираем dataset (DS).
3. Создаем модель.
4. В сгенерированной песне разделяем Vocal и Instrumental.
5. Заменяем тембр в вокальном треке на свой.
6. Собираем "свой" Vocal с музыкой... Voila!
Модель (если удачная) используется многократно, т.ч. хлопоты с пп. 1,2,3 - разовые. Конечно, можно сделать модели с разным характером/манерой.
* я рассматриваю упрощенную схему, причем, нигде не придется создавать платные аккаунты.
AH
13:48
Мастеринг!
Это сложно, это искусство, этому надо учиться ... как обычно, зависит все больше от человека, чем от инструмента, которым он пользуется. Правда, ИИ и здесь меняет ситуацию. Но, по-порядку. Сгенерированные треки (Suno, Udio, Mubert и др.) обычно не отмастеренные - т.е. не соответствующие техническим требованиям. Если такой трек поставить на радио, он выпадет по звучанию - прозвучит тише и блекло.
1. Я использую Reaper и цепочку плагинов Waves. Если это Pop/Rock/EDM, а не BigBand 1940-х, то 5 мин. на мастеринг достаточно (смотрю RMS и АЧХ).
2. Если вы готовы осваивать DAW или есть минимальный опыт, то можно применить Audacity (он free) - там есть контроль RMS и анализ спектра (АЧХ). Самая простая схема:
а) Нормализовать до -0.1dB
б) Поджать Limiter'ом на 4...8dB, так чтобы RMS был в пределах -9...-12dB .
Возможно и АЧХ требует правки. На борту (ver.3.7.0) штатного параметрического EQ нет - я нашел приличный и free.
3. Теперь ИИ: можно просто отмастерить музыку онлайн (free), например, на BandLab.
❤
7
Это сложно, это искусство, этому надо учиться ... как обычно, зависит все больше от человека, чем от инструмента, которым он пользуется. Правда, ИИ и здесь меняет ситуацию. Но, по-порядку. Сгенерированные треки (Suno, Udio, Mubert и др.) обычно не отмастеренные - т.е. не соответствующие техническим требованиям. Если такой трек поставить на радио, он выпадет по звучанию - прозвучит тише и блекло.
1. Я использую Reaper и цепочку плагинов Waves. Если это Pop/Rock/EDM, а не BigBand 1940-х, то 5 мин. на мастеринг достаточно (смотрю RMS и АЧХ).
2. Если вы готовы осваивать DAW или есть минимальный опыт, то можно применить Audacity (он free) - там есть контроль RMS и анализ спектра (АЧХ). Самая простая схема:
а) Нормализовать до -0.1dB
б) Поджать Limiter'ом на 4...8dB, так чтобы RMS был в пределах -9...-12dB .
Возможно и АЧХ требует правки. На борту (ver.3.7.0) штатного параметрического EQ нет - я нашел приличный и free.
3. Теперь ИИ: можно просто отмастерить музыку онлайн (free), например, на BandLab.
13:53
Я закинул на Bandlab трек от Suno (с RMS -17...-18dB, mp3 192kbps), вернул RMS -11dB (wav, 16/44,1). Кстати, отдавать во вне mp3 хуже 256kbps, не очень хорошо - сконвертировать можно онлайн, например, здесь.
Ну, а АЧХ могла бы быть по-ровнее, хотя в целом - УДОБНО!
👍
2
Ну, а АЧХ могла бы быть по-ровнее, хотя в целом - УДОБНО!
AH
18:03
Замена тембра снова.
Тестирую разные сервисы генерации ... вот на media io наткнулся на создание каверов. Там набор голосов, включая Kanye West, Snoop Dogg, Rihanna, Billie Eilish (полагаю по соглашению). Свою голосовую модель подгрузить, похоже, нельзя (bot в support мой вопрос не понял). Но, можно в своем треке (или с YouTube) поменять тембр. Еще делает анимацию лица - можно загрузить фото. Я спел фрагмент "Не для меня ..." (Н.Девитте,А.Молчанов) и заменил свой тембр на 3 голоса (с funny image) из раздела Public Figure. Насколько они достоверны - лучше спрашивать у носителей языка, да и песню брать на английском. Хотя для RVC все-равно какой язык, если модель multilingual (точнее, хорошая).
На free аккаунте генерит/дает скачивать 15 сек, но если сильно надо, можно и из кусочков собрать - каждое видео склеено из 2-х. Работая с Suno/Udio, этот сервис может пригодится, когда генерация нравится, а тембр голоса нет.
🔥
1
Тестирую разные сервисы генерации ... вот на media io наткнулся на создание каверов. Там набор голосов, включая Kanye West, Snoop Dogg, Rihanna, Billie Eilish (полагаю по соглашению). Свою голосовую модель подгрузить, похоже, нельзя (bot в support мой вопрос не понял). Но, можно в своем треке (или с YouTube) поменять тембр. Еще делает анимацию лица - можно загрузить фото. Я спел фрагмент "Не для меня ..." (Н.Девитте,А.Молчанов) и заменил свой тембр на 3 голоса (с funny image) из раздела Public Figure. Насколько они достоверны - лучше спрашивать у носителей языка, да и песню брать на английском. Хотя для RVC все-равно какой язык, если модель multilingual (точнее, хорошая).
На free аккаунте генерит/дает скачивать 15 сек, но если сильно надо, можно и из кусочков собрать - каждое видео склеено из 2-х. Работая с Suno/Udio, этот сервис может пригодится, когда генерация нравится, а тембр голоса нет.
18:05
18:05
AH
22:17
Пересборка песни.
Планировал сделать описание по Audacity (хотя душа не лежала - free, но...). Каким минимальным набором real-time (on the fly) функций я пользуюсь в Reaper для пересборки песни, т.е. режем/склеиваем, без FX? См. табл... Решил найти что-то по-удобнее и нашел - BandLab Studio. Для начала лучше освоить пп.1-5, а потом пп. 6-9, если потребуются. При этом, это лишь ~10% от free функционала + все на русском. Да, там и FX достаточно.
Планировал сделать описание по Audacity (хотя душа не лежала - free, но...). Каким минимальным набором real-time (on the fly) функций я пользуюсь в Reaper для пересборки песни, т.е. режем/склеиваем, без FX? См. табл... Решил найти что-то по-удобнее и нашел - BandLab Studio. Для начала лучше освоить пп.1-5, а потом пп. 6-9, если потребуются. При этом, это лишь ~10% от free функционала + все на русском. Да, там и FX достаточно.
22:22
Процедура в Bandlab:
1. Определяем bpm (темп), например, здесь. Он будет целочисленным - но, хотя бы так, т.к. резать лучше по сетке. Ставим темп [1].
2. Даем название проекту [2] (можно продолжить работу в др. время).
3. Тащим свой трек на дорожку. Жмем три точки > Дублировать (будет 2 одинаковых) [3] - это нужно для Cross-fade [4]. Делаем один Solo [5].
4. Слушаем, режем, перетаскиваем Clip'ы. Fade'ы проще настраивать в нижней части - кн. Редактор.
5. Для перехода [4] из "клипа в клип", надо расположить их на разных дорожках. Время наложения разное - зависит от того, что нужно получить. Чтобы ритм не сбивался, следует смотреть на совпадение волны [6]. Для треков с ударными это сделать легче.
6. Редактировать лучше on the fly, т.е. проигрывая - для этого задать/включить петлю на этот участок [7].
1. Определяем bpm (темп), например, здесь. Он будет целочисленным - но, хотя бы так, т.к. резать лучше по сетке. Ставим темп [1].
2. Даем название проекту [2] (можно продолжить работу в др. время).
3. Тащим свой трек на дорожку. Жмем три точки > Дублировать (будет 2 одинаковых) [3] - это нужно для Cross-fade [4]. Делаем один Solo [5].
4. Слушаем, режем, перетаскиваем Clip'ы. Fade'ы проще настраивать в нижней части - кн. Редактор.
5. Для перехода [4] из "клипа в клип", надо расположить их на разных дорожках. Время наложения разное - зависит от того, что нужно получить. Чтобы ритм не сбивался, следует смотреть на совпадение волны [6]. Для треков с ударными это сделать легче.
6. Редактировать лучше on the fly, т.е. проигрывая - для этого задать/включить петлю на этот участок [7].
AH
16:43
Свой голос снова.
Провел еще один тест c Suno - спел* под минус и скормил в Upload Audio. Здесь кроме голоса еще 3 пойманных зайца: стиль, темп, тональность - все в целом сохраняется. Косяки - звук хуже, чем в исходнике, голос хоровой и порой морфированный, но... Привожу удачные, на мой взгляд, примеры. Все исходники ~60 сек. Примеры состоят из фрагментов в 18-20 сек - сначала нарезка из исходника, затем нарезки из генераций.
* 1,2,3 - как есть, 4,5 - оттьюнил, т.к. техникой опеваний не владею. Забавно, конечно слушать, вроде как "вот смотри, как надо петь", но ... нет ни времени, ни желания вокалом заниматься.
Не сработало, когда просто смешал с минусом голосовые сообщения из WhatsApp (как чисто речевой DS такое подходит). Генерация - голоса из Suno (М/Ж) - система, похоже, не нашла логики/единства в музыке и речи.
В Style ничего не вводил, тексты в примерах - генерация Suno.
Другие способы - а) свой речевой DS link, link. б) спеть мелодию link, link. в) использовать RVC link, link.
🔥
1
Провел еще один тест c Suno - спел* под минус и скормил в Upload Audio. Здесь кроме голоса еще 3 пойманных зайца: стиль, темп, тональность - все в целом сохраняется. Косяки - звук хуже, чем в исходнике, голос хоровой и порой морфированный, но... Привожу удачные, на мой взгляд, примеры. Все исходники ~60 сек. Примеры состоят из фрагментов в 18-20 сек - сначала нарезка из исходника, затем нарезки из генераций.
* 1,2,3 - как есть, 4,5 - оттьюнил, т.к. техникой опеваний не владею. Забавно, конечно слушать, вроде как "вот смотри, как надо петь", но ... нет ни времени, ни желания вокалом заниматься.
Не сработало, когда просто смешал с минусом голосовые сообщения из WhatsApp (как чисто речевой DS такое подходит). Генерация - голоса из Suno (М/Ж) - система, похоже, не нашла логики/единства в музыке и речи.
В Style ничего не вводил, тексты в примерах - генерация Suno.
Другие способы - а) свой речевой DS link, link. б) спеть мелодию link, link. в) использовать RVC link, link.
AH
21:07
21:08
Один из подписчиков (Борис), прислал два примера и вернул к теме анимации лица и синхронизации губ. С каждым днем эта техника все совершеннее.
🔥
1
21:10
... 14 лет назад в свободное время мы в команде создали муз. iPhone приложение iPuffer - тогда это было почти новаторски... Сейчас распознавание лица, глаз, рта уверенно делает ИИ 😄
21:11
... в 2020-м я собрал мультик к песне "Инициатор", используя CrazyTalk Animator (Lip Sync к готовым персонажам).
🔥
1
21:18
Т.е. можно взять несколько поз, сгенерить переходы (A-B-C, D-E-F, B-E) и получить (если применить также реверс, zoom и др.) много вариантов.
AH
11:55
В каком жанре песня (Music Genre Classification) ?
Вопрос возникает, когда надо вбить Style (prompt) в сервисе генерации. Проще указать на известную песню, но система не принимает prompt в таком виде, как Wind Of Change / Scorpions. ИИ генераторы не любят такие задания, т.к. есть вероятность сгенерировать исходник, т.е. то, на чем нейронка обучалась, особенно, если и структура текста близка. Пояснение термина жанр и сложности задания стиля я достаточно подробно разбирал в статье.
Как же получить не только конкретный жанр, но и стиль аранжировки? После множества экспериментов с Suno я остаюсь приверженцем использования режима Upload Audio. Системе скармливается 60 сек. реальной композиции (DS) ... и новые треки в этом стиле можно генерить вообще без задания prompt'а. Есть сложности с "пропуском" DS в Suno из-за Copyright, но в целом, они обходимы (link).
❤
1
🔥
1
Вопрос возникает, когда надо вбить Style (prompt) в сервисе генерации. Проще указать на известную песню, но система не принимает prompt в таком виде, как Wind Of Change / Scorpions. ИИ генераторы не любят такие задания, т.к. есть вероятность сгенерировать исходник, т.е. то, на чем нейронка обучалась, особенно, если и структура текста близка. Пояснение термина жанр и сложности задания стиля я достаточно подробно разбирал в статье.
Как же получить не только конкретный жанр, но и стиль аранжировки? После множества экспериментов с Suno я остаюсь приверженцем использования режима Upload Audio. Системе скармливается 60 сек. реальной композиции (DS) ... и новые треки в этом стиле можно генерить вообще без задания prompt'а. Есть сложности с "пропуском" DS в Suno из-за Copyright, но в целом, они обходимы (link).
AH
16:36
Suno франшиза!
Пару недель как хотел написать в какую-нибудь IT контору, могут ли они стать посредником, т.к. платить за рубеж не очень удобно ... а тут вот оно - GPTunnel ! Правда, функционал ограничен - нет Upload Audio, Extend и др. опций.
Cгенерил 2 песни (оплачивать можно по трекам - 12 р/ шт.), задал вопрос, что с тарифом, какая версия, что с функционалом? Ответ: Premier, v3.5 (а теперь и v4, хотя ее народ ругает), по функционалу - будут расширять. По копирайту - "в пункте 8.2.6 нашей оферты сказано, что мы не притязаем на контент, созданный пользователями, и они могут использовать его по своему усмотрению". Это не совсем то, что у Suno, т.ч. надо уточнять, но самое главное - что нужно стриминговым сервисам (прокатчикам). По интерфейсу не все идеально/удобно, но ... все совершенствуется 😃
🔥
2
Пару недель как хотел написать в какую-нибудь IT контору, могут ли они стать посредником, т.к. платить за рубеж не очень удобно ... а тут вот оно - GPTunnel ! Правда, функционал ограничен - нет Upload Audio, Extend и др. опций.
Cгенерил 2 песни (оплачивать можно по трекам - 12 р/ шт.), задал вопрос, что с тарифом, какая версия, что с функционалом? Ответ: Premier, v3.5 (а теперь и v4, хотя ее народ ругает), по функционалу - будут расширять. По копирайту - "в пункте 8.2.6 нашей оферты сказано, что мы не притязаем на контент, созданный пользователями, и они могут использовать его по своему усмотрению". Это не совсем то, что у Suno, т.ч. надо уточнять, но самое главное - что нужно стриминговым сервисам (прокатчикам). По интерфейсу не все идеально/удобно, но ... все совершенствуется 😃
AH
20:12
Suno: за кулисами...
"Если музыка ИИ так успешна после 1-2 лет разработки, представьте, насколько она может быть хороша через 5 лет" - Stephanie Palazzolo
Сделал перевод (Google + правка) статьи от 24 мая 2024. Не самая свежая информация, особенно, учитывая скорость изменений в сфере ИИ. Однако, она дает некоторое представление о том, что в ней происходит.
👍
1
"Если музыка ИИ так успешна после 1-2 лет разработки, представьте, насколько она может быть хороша через 5 лет" - Stephanie Palazzolo
Сделал перевод (Google + правка) статьи от 24 мая 2024. Не самая свежая информация, особенно, учитывая скорость изменений в сфере ИИ. Однако, она дает некоторое представление о том, что в ней происходит.
AH
14:53
Suno... похожести и не (Similarities).
Снова получил вопрос: "почему (у Suno) получаются разные аранжировки при одном Style/prompt и как правильно задавать стиль?" . Мне казалось, что не раз поделился своими догадками (link, link, link), но, поскольку вопрос остается актуальным, можно к нему вернуться.
Есть два способа задания стиля. Я думаю, каждый, кто сам проверит оба, получит ответ, точнее - прочувствует, как работает система.
Вот аналогия - стиль художника. Если мы заказываем одному нарисовать 10-ть картин, они будут разные, но похожие по стилю. А если 10-ть у разных художников на одну тему, то они по стилю будут непохожие.
Снова получил вопрос: "почему (у Suno) получаются разные аранжировки при одном Style/prompt и как правильно задавать стиль?" . Мне казалось, что не раз поделился своими догадками (link, link, link), но, поскольку вопрос остается актуальным, можно к нему вернуться.
Есть два способа задания стиля. Я думаю, каждый, кто сам проверит оба, получит ответ, точнее - прочувствует, как работает система.
Вот аналогия - стиль художника. Если мы заказываем одному нарисовать 10-ть картин, они будут разные, но похожие по стилю. А если 10-ть у разных художников на одну тему, то они по стилю будут непохожие.
15:00
Вокальные треки: и ритмика, и мелодии меняются, но стиль сохранен и развит. Причем, если ритмика и похожа, то ступени в мелодии разные.
👍
1
AH
17:26
Suno: дуэт? - мутная тема...
Не было у самого такой задачи, когда спросили - попробовал, еще в августе (link, link). В Suno-wiki читаю: "Возможны ли дуэты? и да, и нет. Дуэты иногда возникают спонтанно... голоса Suno будут... часто неправильного пола... Добавьте Duet в Style..." В принципе, дуэты ЕСТЬ, но управлять ими НЕЛЬЗЯ.
Когда DistGuitar меняется на Synth/Sax еще куда не шло, но когда М поёт Ж текст и наоборот, то это...? Самый яркий пример непредсказуемости генерации! Два образа к попыткам освоить систему (лотерея):
а) каждый день просыпаешься в новой обстановке ... планировка/мебель,
б) каждое следующее занятие в автошколе на другом виде транспорта + незнакомые знаки на дороге.
🔥
2
Не было у самого такой задачи, когда спросили - попробовал, еще в августе (link, link). В Suno-wiki читаю: "Возможны ли дуэты? и да, и нет. Дуэты иногда возникают спонтанно... голоса Suno будут... часто неправильного пола... Добавьте Duet в Style..." В принципе, дуэты ЕСТЬ, но управлять ими НЕЛЬЗЯ.
Когда DistGuitar меняется на Synth/Sax еще куда не шло, но когда М поёт Ж текст и наоборот, то это...? Самый яркий пример непредсказуемости генерации! Два образа к попыткам освоить систему (лотерея):
а) каждый день просыпаешься в новой обстановке ... планировка/мебель,
б) каждое следующее занятие в автошколе на другом виде транспорта + незнакомые знаки на дороге.
17:28
Посмотрел, что делают другие - вбил в Search "Duet". Есть удачные варианты, есть не очень, есть даже ироничная песенка с текстом, "как получить дуэт"...
Написал шуточный текст и начал тестить ... Включал в стиль "Duet", пробовал в Lyrics [Female Vocals], [Female Singer], [Female] и, соответственно, [Male...].
Казалось бы, - нужно сделать много версий при одних и тех же Style/Lyrics, но система же выбирает разные модели/аранжировки и из них не соберешь песню.
👍
1
Написал шуточный текст и начал тестить ... Включал в стиль "Duet", пробовал в Lyrics [Female Vocals], [Female Singer], [Female] и, соответственно, [Male...].
Казалось бы, - нужно сделать много версий при одних и тех же Style/Lyrics, но система же выбирает разные модели/аранжировки и из них не соберешь песню.
AH
22:01
Ну что, теперь "курсовые" могут скачивать и студенты консерваторий и муз-колледжей... И "скрипач", похоже, уже почти не нужен... Экономим время, т.ч. я ТЕЗИСНО.
Уже после первого знакомства с Suno меня поражало качество нот (не звук) - все правильно... Я занимался генерацией и понимаю, как сложно сделать её без ошибок в нотах, с натуральным звуком + исполнительскими нюансами... Общаюсь с музыкантами и у нас, и за рубежом. Они разделились на 3 группы:
1. В джазе/классике - спокойны, особенно джазисты (т.к. генерят на каждом концерте десятки мелодий /аранжировок).
2. Хорошие авторы-ремесленники (сонграйтеры, исполнители, аранжировщики) - сочинять, конкурировать и раньше было не просто... Очень напряглись.
3. Способные адаптироваться, для кого музыка больше бизнес... Уже зарабатывают с помощью ИИ.
🔥
5
Уже после первого знакомства с Suno меня поражало качество нот (не звук) - все правильно... Я занимался генерацией и понимаю, как сложно сделать её без ошибок в нотах, с натуральным звуком + исполнительскими нюансами... Общаюсь с музыкантами и у нас, и за рубежом. Они разделились на 3 группы:
1. В джазе/классике - спокойны, особенно джазисты (т.к. генерят на каждом концерте десятки мелодий /аранжировок).
2. Хорошие авторы-ремесленники (сонграйтеры, исполнители, аранжировщики) - сочинять, конкурировать и раньше было не просто... Очень напряглись.
3. Способные адаптироваться, для кого музыка больше бизнес... Уже зарабатывают с помощью ИИ.
AH
19:41
"Инкрустация" вокала!
В студийной работе такое случается - вокалист уже ушел, а где-то окончание проглочено, где-то мимо ритма или ударение не там ... А вот у Suno/Udio косяки с ударением почти норма, т.ч. порой "резать и клеить" - единственный способ, как спасти вокальный трек. Тем более, что система не перепевает то же самое, а генерит другое.
Сгенерил несколько треков на один и тот же текст. Было не там ударение в слове будет [#1], а еще смущала гласная в пропущу [#2] (т.к. произносится А, хотя пишется О). Причем, в медленных/ незагруженных версиях это все было заметнее. Я подправил текст (.. бУдет ... прапущу...) для новых версий, но одну "кривую" решил исправить.
👍
3
В студийной работе такое случается - вокалист уже ушел, а где-то окончание проглочено, где-то мимо ритма или ударение не там ... А вот у Suno/Udio косяки с ударением почти норма, т.ч. порой "резать и клеить" - единственный способ, как спасти вокальный трек. Тем более, что система не перепевает то же самое, а генерит другое.
Сгенерил несколько треков на один и тот же текст. Было не там ударение в слове будет [#1], а еще смущала гласная в пропущу [#2] (т.к. произносится А, хотя пишется О). Причем, в медленных/ незагруженных версиях это все было заметнее. Я подправил текст (.. бУдет ... прапущу...) для новых версий, но одну "кривую" решил исправить.
19:49
Т.е. проигрываем по петле, двигаем, подгоняем, слушаем, добиваемся более правильного пропевания.
👍
5
AH
10:13
Собрал клип - все компоненты от ИИ.
Конечно, это детский сад в сравнении с тем, что народ делает - нужны платные аккаунты и по-серьезнее отношение, но ...
1. Текст, музыка, голос - Suno (от меня только тема + Style).
2. Взял реальное фото (портрет), сгенерил портрет своего персонажа (link) в cartoon стиле [1].
3. Пытался к портрету "дорисовать" тело - не вышло, может не нашел нужный prompt.
4. Сгенерил тело [3] (link), в PhotoShop'е приклеил голову [4]. Сделал 3 картинки-заготовки - крупный (исходный фон), средний (ChromaKey) и общий (ChromaKey) планы.
5. Сделал анимацию (link) лица (крупный/средний планы). Причем, косички пришлось обрезать [2], т.к. при анимации они оставались неподвижными.
❤
2
🔥
1
Конечно, это детский сад в сравнении с тем, что народ делает - нужны платные аккаунты и по-серьезнее отношение, но ...
1. Текст, музыка, голос - Suno (от меня только тема + Style).
2. Взял реальное фото (портрет), сгенерил портрет своего персонажа (link) в cartoon стиле [1].
3. Пытался к портрету "дорисовать" тело - не вышло, может не нашел нужный prompt.
4. Сгенерил тело [3] (link), в PhotoShop'е приклеил голову [4]. Сделал 3 картинки-заготовки - крупный (исходный фон), средний (ChromaKey) и общий (ChromaKey) планы.
5. Сделал анимацию (link) лица (крупный/средний планы). Причем, косички пришлось обрезать [2], т.к. при анимации они оставались неподвижными.
10:17
6. Сначала сделал анимацию тела (танец) в link, link, link. Танцевали классно, но у них от начала к концу клипа (за 4 сек) лицо от моей исходной картинки превращалось в лицо девушки из юго-восточной Азии + зеленый фон нарушался. Таких я отрезал, т.е. выше груди не показывал.
Здесь пригодился бы, похоже, этот подход для создания новых поз.
Потом в link удалось сгенерировать танцы с сохранением исходного образа и фона.
😁
2
👍
1
Здесь пригодился бы, похоже, этот подход для создания новых поз.
Потом в link удалось сгенерировать танцы с сохранением исходного образа и фона.
10:19
AH
00:11
Suno: рестайлинг / ре-аранжировка.
Уже после публикации большой статьи ( "Suno как аранжировщик" ) и нескольких приложений (link, link, link, link, link) с примерами и выводами, где, как мне казалось, я многое пояснил, получил несколько вопросов вроде " ... у меня есть песни, может ли Suno сделать аранжировку?"...
Авторы приходят к аранжировщику с разной готовностью/ полнотой материала, поэтому переспрашивал: "Уже готовые, это что: Текст? Мелодия (голосом, инструментом, ноты)? Гармония к мелодии? Темп, тип ритма, примерный стиль? Прототип (т.е. на что должно быть похоже)?" От того, что присутствует, зависит как и насколько удачно может быть использован(о) Suno.
Здесь хочу показать результат обращения на прошлой неделе. Да, действительно, с Suno можно сделать ре-аранжировку готовой песни, получить другой характер, "вдохнуть" новую жизнь (как бы парадоксально это не выглядело).
👍
3
🔥
1
Уже после публикации большой статьи ( "Suno как аранжировщик" ) и нескольких приложений (link, link, link, link, link) с примерами и выводами, где, как мне казалось, я многое пояснил, получил несколько вопросов вроде " ... у меня есть песни, может ли Suno сделать аранжировку?"...
Авторы приходят к аранжировщику с разной готовностью/ полнотой материала, поэтому переспрашивал: "Уже готовые, это что: Текст? Мелодия (голосом, инструментом, ноты)? Гармония к мелодии? Темп, тип ритма, примерный стиль? Прототип (т.е. на что должно быть похоже)?" От того, что присутствует, зависит как и насколько удачно может быть использован(о) Suno.
Здесь хочу показать результат обращения на прошлой неделе. Да, действительно, с Suno можно сделать ре-аранжировку готовой песни, получить другой характер, "вдохнуть" новую жизнь (как бы парадоксально это не выглядело).
AH
11:33
Suno: соло? Импровизация! ...
Предыстория: меня интересовало можно ли улучшить качество звукового файла (по аналогии, как ИИ для графики делает upscale, ретушь, колоризацию). Тут два применения: а) освежать старые записи, б) менять дешевый звук на дорогой (не меняя нот!). Ну, т.е. отрендерил MIDI файл с недорогим GM синт., обработал ИИ алгоритмом и получил новую фонограмму, где все инструменты высокого качества + соответствующие исполнительские нюансы (ИН), чего в MIDI как правило нет. Да и Suno бы пригодилось чистить треки от шума... Задавал вопрос всем, кого имеет смысл об этом спрашивать - пока ответа не получил.
То, что Suno в режиме Upload Audio может из мелодии генерить полную аранжировку, было понятно давно (link, link). Создание соло/ импровизации на основе заданной мелодии - немного другая тема. Положительный итог её проработки в следующем: Suno может делать из дешевого звука дорогой при замене тембра (ну, как всегда у Suno, не очень чистый). Сделал несколько тестов.
👍
6
Предыстория: меня интересовало можно ли улучшить качество звукового файла (по аналогии, как ИИ для графики делает upscale, ретушь, колоризацию). Тут два применения: а) освежать старые записи, б) менять дешевый звук на дорогой (не меняя нот!). Ну, т.е. отрендерил MIDI файл с недорогим GM синт., обработал ИИ алгоритмом и получил новую фонограмму, где все инструменты высокого качества + соответствующие исполнительские нюансы (ИН), чего в MIDI как правило нет. Да и Suno бы пригодилось чистить треки от шума... Задавал вопрос всем, кого имеет смысл об этом спрашивать - пока ответа не получил.
То, что Suno в режиме Upload Audio может из мелодии генерить полную аранжировку, было понятно давно (link, link). Создание соло/ импровизации на основе заданной мелодии - немного другая тема. Положительный итог её проработки в следующем: Suno может делать из дешевого звука дорогой при замене тембра (ну, как всегда у Suno, не очень чистый). Сделал несколько тестов.
AH
18:24
Suno v4 - печалька пока ... ужас.
Утро началось весело: пришло письмо из Suno support с предложением 10 free песен на v4 (я на free акк. с v3.5). А вверху был этот баннер ("Бесплатное де...мо"). Сгенерил 8 треков (все с Upload Audio) - результат немного странный ... Написал МакКинли (Voice Dataset Engineer / California) с вопросами - как ему кажется v4 и правильно ли я понял заголовок. Ответ:
🔥
5
Утро началось весело: пришло письмо из Suno support с предложением 10 free песен на v4 (я на free акк. с v3.5). А вверху был этот баннер ("Бесплатное де...мо"). Сгенерил 8 треков (все с Upload Audio) - результат немного странный ... Написал МакКинли (Voice Dataset Engineer / California) с вопросами - как ему кажется v4 и правильно ли я понял заголовок. Ответ:
18:26
1) ... некоторые из ремастеров v4, которые я пробовал, были интересными, но обычно в них что-то не так, или они недостаточно точно следуют prompt. В целом, большую часть времени много непредсказуемости... Было несколько редких случаев, когда все получалось чище, но это в основном из-за удачи и со специальным, строгим prompt.
2) ... ха-ха, это просто неформальный способ сказать: "Эй, ребята, бесплатные штуки!" В США люди часто используют такие термины довольно небрежно ... это не следует воспринимать буквально... они, вероятно, говорят это, чтобы привлечь внимание и заинтересовать людей.
👍
3
🤔
2
😁
1
2) ... ха-ха, это просто неформальный способ сказать: "Эй, ребята, бесплатные штуки!" В США люди часто используют такие термины довольно небрежно ... это не следует воспринимать буквально... они, вероятно, говорят это, чтобы привлечь внимание и заинтересовать людей.
AH
11:46
Сведение/ мастеринг и ... "Голливудский свет".
В конце 80-х в Новосибирской консерватории проводились ССЭ (субъективно- статистические экспертизы) акустических систем (АС) Бердского радиозавода. Профессора слушали разные произведения и проставляли оценки, как самим новым АС, так и в сравнении с импортными... В один из дней ССЭ ко мне подошел Александр С., математик, ... послушав наш разговор, он сказал: "... если вам нужна отчетливость/ прозрачность, вам следует вносить искажения". Мы, молодые инженеры и в меру фанаты Hi-End'а, подумали, что это шутка, но (!) ... он оказался прав (наверное, читал зарубежные журналы, вроде AES).
❤
2
👍
2
🥰
1
В конце 80-х в Новосибирской консерватории проводились ССЭ (субъективно- статистические экспертизы) акустических систем (АС) Бердского радиозавода. Профессора слушали разные произведения и проставляли оценки, как самим новым АС, так и в сравнении с импортными... В один из дней ССЭ ко мне подошел Александр С., математик, ... послушав наш разговор, он сказал: "... если вам нужна отчетливость/ прозрачность, вам следует вносить искажения". Мы, молодые инженеры и в меру фанаты Hi-End'а, подумали, что это шутка, но (!) ... он оказался прав (наверное, читал зарубежные журналы, вроде AES).
11:52
"Плотный бас и отчетливые верха" - это мастеринг!? Ну, можно и так сказать, но сначала о "Голливудском свете". Это техника освещения в фото/ кино-съемке, при которой герой в кадре виден отчетливо. Три важных момента: [a] фокус/ резкость на персонаже, [b] выделен контур, [c] размыт задник. При соблюдении этих приемов картинка правильно смотрится даже при низком разрешении и невысокой контрастности. Причина - наличие в нужных местах градиентов (по яркости, цвету, резкости).
👍
4
11:58
... где на черном фоне один из темно-синих кругов ...
AH
22:10
Suno v3.5: акапелла (Новогодняя).
Знакомый из Канады (оперный певец и инженер) прислал шикарную акапеллу Тима Уорика и спросил: "А может твой ИИ так спеть?"... Треки с намеком на акапеллу у меня получались еще в первых опытах (вер. 2.0, 2.1. ... я тогда взял чужой prompt). Так что решил попробовать сделать что-то лирическое и праздничное (без инструментов!).
Использовал 6 разных DS (режим Upload Audio) и сгенерил 48 треков. 4 DS собрал из акапелл проф. муж. квартетов, 2 своих: один - пропел 4 строчки, другой - речевой. Из акапелл старался выбирать те, где встречается многоголосие (аккорды), а не только "педаль" или пропевание партии инструментального баса:
Tim Waurick / "Have Yourself a Merry Little Christmas"
Грузинский квартет / NoName
Stephan Carlson / "Never Know Your Love"
First Take квартет / "No One Sings Higher Than Me"
❤
3
Знакомый из Канады (оперный певец и инженер) прислал шикарную акапеллу Тима Уорика и спросил: "А может твой ИИ так спеть?"... Треки с намеком на акапеллу у меня получались еще в первых опытах (вер. 2.0, 2.1. ... я тогда взял чужой prompt). Так что решил попробовать сделать что-то лирическое и праздничное (без инструментов!).
Использовал 6 разных DS (режим Upload Audio) и сгенерил 48 треков. 4 DS собрал из акапелл проф. муж. квартетов, 2 своих: один - пропел 4 строчки, другой - речевой. Из акапелл старался выбирать те, где встречается многоголосие (аккорды), а не только "педаль" или пропевание партии инструментального баса:
Tim Waurick / "Have Yourself a Merry Little Christmas"
Грузинский квартет / NoName
Stephan Carlson / "Never Know Your Love"
First Take квартет / "No One Sings Higher Than Me"
AH
13:37
Suno: детский голос с гарантией.
С сентября 2024 г. провел много экспериментов (см. Дневник), пытаясь сделать "правильно", т.е. собирал dataset'ы (DS, наверное, более 40), как речевые, так и фрагменты песен. Легальных гендеров в Suno три: М, Ж и Vocaloid. Если удавалось "спрятать" детский голос в музыкальном DS, то он появлялся в генерации (возможно в плотном/ грязном треке Suno принимает его за женский), если нет - то система подставляла свой дефолтный Ж (или М). Речевые крайне редко срабатывали, с музыкой - чаще, но все-равно удачных генераций вряд ли больше 5%.
Пара авторов, сочиняющих для детей, снова спросили и я решил попробовать RVC. Наверное, кто-то так уже давно делает, может стоило сразу решать вопрос "в лоб", точнее "в обход"?... Генерим детскую песню сначала с Ж (или М), потом меняем тембр на детский, вуаля!? Да, схема рабочая, но есть нюансы.
👍
6
С сентября 2024 г. провел много экспериментов (см. Дневник), пытаясь сделать "правильно", т.е. собирал dataset'ы (DS, наверное, более 40), как речевые, так и фрагменты песен. Легальных гендеров в Suno три: М, Ж и Vocaloid. Если удавалось "спрятать" детский голос в музыкальном DS, то он появлялся в генерации (возможно в плотном/ грязном треке Suno принимает его за женский), если нет - то система подставляла свой дефолтный Ж (или М). Речевые крайне редко срабатывали, с музыкой - чаще, но все-равно удачных генераций вряд ли больше 5%.
Пара авторов, сочиняющих для детей, снова спросили и я решил попробовать RVC. Наверное, кто-то так уже давно делает, может стоило сразу решать вопрос "в лоб", точнее "в обход"?... Генерим детскую песню сначала с Ж (или М), потом меняем тембр на детский, вуаля!? Да, схема рабочая, но есть нюансы.
AH
19:03
Suno: "В начале было Слово ... "
Интересно, кто-то предполагал, что алгоритмы ИИ вернут нас к первым словам из Библии? "...Все чрез Него на́чало быть, и без Него ничто не на́чало быть, что на́чало быть...". И действительно:
text to lyrics
text to music
text to video
Генерация в Suno во многом зависит от текста. Сгенерите несколько треков, оставляя Style пустым - Suno покажет, как понимает смысл, характер вашего стихотворения. (Правда, иногда мне кажется, что видя русский, система сразу "идет в библиотеку с русскими образцами"... Порой это бесит: я хотел лирику, что-то тёплое, а результат ближе к ... Мурке.)
Музыкальный синтаксис (даже инструментальной пьесы), согласно теории, включает такие части, как мотив, фраза, предложение, период. Т.е. структура мелодии имеет много общего со структурой текста.
👍
2
🔥
1
Интересно, кто-то предполагал, что алгоритмы ИИ вернут нас к первым словам из Библии? "...Все чрез Него на́чало быть, и без Него ничто не на́чало быть, что на́чало быть...". И действительно:
text to lyrics
text to music
text to video
Генерация в Suno во многом зависит от текста. Сгенерите несколько треков, оставляя Style пустым - Suno покажет, как понимает смысл, характер вашего стихотворения. (Правда, иногда мне кажется, что видя русский, система сразу "идет в библиотеку с русскими образцами"... Порой это бесит: я хотел лирику, что-то тёплое, а результат ближе к ... Мурке.)
Музыкальный синтаксис (даже инструментальной пьесы), согласно теории, включает такие части, как мотив, фраза, предложение, период. Т.е. структура мелодии имеет много общего со структурой текста.
19:08
Негатив
19:10
Позитив
19:17
Другой тест - форматирование Lyrics. Наверное, многие замечали, как Suno, если стихотворение не ложится в выбранную форму, ломает текст - слова куплета налазят на припев или наоборот. (Кажется, раньше таких ошибок было больше). Иногда система справляется с укладкой слов на музыку за счет:
* повтора слова, двух (или строки),
* явного удлинения гласной,
* добавления от себя ла-ла-ла
Сейчас, особенно с Upload Audio, я чаще сталкиваюсь с повтором Verse/ Chorus, чего в тексте не было. Это выглядит почти как у музыкантов - "... во 2-м ошиблись, давай повторим". Похоже, система "видит" косяк и, продолжая "отрисовку", запускает повтор... При этом, трек уже транслируется клиенту, т.е. песня останется неисправленной.
* повтора слова, двух (или строки),
* явного удлинения гласной,
* добавления от себя ла-ла-ла
Сейчас, особенно с Upload Audio, я чаще сталкиваюсь с повтором Verse/ Chorus, чего в тексте не было. Это выглядит почти как у музыкантов - "... во 2-м ошиблись, давай повторим". Похоже, система "видит" косяк и, продолжая "отрисовку", запускает повтор... При этом, трек уже транслируется клиенту, т.е. песня останется неисправленной.
AH
14:16
Suno: как сервис могут использовать вокалисты и поэты?
Марина А., хорошо поющая знакомая, пожаловалась: авторы присылали стихи, просили исполнить, но качество аранжировок ей не нравилось... За пару дней освоила Suno: генерит, выбирает удачную версию, делает split voc/ instrum, записывает свой вокал (немного по-своему), собирает песню и отправляет автору.
Можно и так, но есть более эффективный путь: вокалисты и поэты могут сделать свой набор DS для тестирования текстов, моделирования, исполнения песен. Можно и со своим голосом. Думаю, 5-6 DS вполне бы хватило, чтобы "закрыть" 90% стилей/ характеров (радость/ печаль, быстро/ медленно, акустика, поп и т.п.). Хотя, конечно, здесь исполнение/ манера будут в целом от Suno, даже если тембр вокалиста или поэта.
🔥
3
Марина А., хорошо поющая знакомая, пожаловалась: авторы присылали стихи, просили исполнить, но качество аранжировок ей не нравилось... За пару дней освоила Suno: генерит, выбирает удачную версию, делает split voc/ instrum, записывает свой вокал (немного по-своему), собирает песню и отправляет автору.
Можно и так, но есть более эффективный путь: вокалисты и поэты могут сделать свой набор DS для тестирования текстов, моделирования, исполнения песен. Можно и со своим голосом. Думаю, 5-6 DS вполне бы хватило, чтобы "закрыть" 90% стилей/ характеров (радость/ печаль, быстро/ медленно, акустика, поп и т.п.). Хотя, конечно, здесь исполнение/ манера будут в целом от Suno, даже если тембр вокалиста или поэта.
AH
17:13
Меня зовут Борис. По приглашению Алексея я буду выкладывать мои находки, связанные как с ИИ в сфере музыки, Suno или Udio (а я являюсь большим поклонником все же Udio), так и в целом технологии и способы в области ИИ. То, что показалось мне интересным и заслуживающим внимания.
Модели на основе собственных изображений.
Я хотел бы рассказать о Weights - сервисе, который доставил мне много забавных моментов в новогодние праздники. Это целая система, позволяющая создавать фото, видео, делать замену голоса и т.д. Одна из функций – создание модели на основе собственных изображений. Работает на Flux, кот. на сегодня, я уверен, генерирует лучшие изображения.
Модели на основе собственных изображений.
Я хотел бы рассказать о Weights - сервисе, который доставил мне много забавных моментов в новогодние праздники. Это целая система, позволяющая создавать фото, видео, делать замену голоса и т.д. Одна из функций – создание модели на основе собственных изображений. Работает на Flux, кот. на сегодня, я уверен, генерирует лучшие изображения.
17:14
Во вкладке «Обучить модель» загрузить от 5 до 30 выбранных квадратных изображений - максимально разные позы, ракурсы.
Важно задать триггер - слово, обозначающее объект генерации, например - Girl. Сама модель может иметь условное название, пусть SR1. Запустить обучение модели. Модели, кот. я создавал, обучались от 30 мин. до 6 час. примерно.
Когда модель готова, появляется возможность генерировать изображения на ее основе согласно подсказкам.
Есть возможность использовать режим квадратного изображения, портретный режим и пейзаж. Если закончилась фантазия, можно «Масштабировать запрос» и система сама предложит стиль, камеру, одежду и т.д. Эта функция работает до 100 символов в поле. Можете добавлять существующие модели других пользователей. Это возможно будет стиль аниме, ретро, скетч или же общая атмосфера (киноафиша, любительская камера, золотой час). Сервис имеет приложение для Андроид и iOS.
В качестве примера выше для модели я взял певицу Шер. Думаю, все согласятся, что она имеет узнаваемый образ.
Важно задать триггер - слово, обозначающее объект генерации, например - Girl. Сама модель может иметь условное название, пусть SR1. Запустить обучение модели. Модели, кот. я создавал, обучались от 30 мин. до 6 час. примерно.
Когда модель готова, появляется возможность генерировать изображения на ее основе согласно подсказкам.
Есть возможность использовать режим квадратного изображения, портретный режим и пейзаж. Если закончилась фантазия, можно «Масштабировать запрос» и система сама предложит стиль, камеру, одежду и т.д. Эта функция работает до 100 символов в поле. Можете добавлять существующие модели других пользователей. Это возможно будет стиль аниме, ретро, скетч или же общая атмосфера (киноафиша, любительская камера, золотой час). Сервис имеет приложение для Андроид и iOS.
В качестве примера выше для модели я взял певицу Шер. Думаю, все согласятся, что она имеет узнаваемый образ.
17:16
Как использовать данную технологию каждый, сможет придумать сам. Возможно вы захотите увидеть себя на сцене рок концерта на стадионе или на пустынном пляже «подышать свежим воздухом, веющим с океана», несмотря на мороз за окном.
Поэтому, в следующий раз, когда ваша супруга или подруга скажет, что хотела бы новогоднюю фотосессию, можно ненавязчиво спросить: «Дорогая, просто скажи мне какое платье ты бы хотела на фотосессию и приготовь пока что-нибудь вкусное». Шутка)
Конечно, модель не идеальна. Из 10 сгенерированных изображений будет максимально похоже только 2-3. И то возможно будут нелепости с ногами, одеждой или с предметами. Но оставшийся результат сможет порадовать схожестью и даже творческой непредсказуемостью.
Поэтому, в следующий раз, когда ваша супруга или подруга скажет, что хотела бы новогоднюю фотосессию, можно ненавязчиво спросить: «Дорогая, просто скажи мне какое платье ты бы хотела на фотосессию и приготовь пока что-нибудь вкусное». Шутка)
Конечно, модель не идеальна. Из 10 сгенерированных изображений будет максимально похоже только 2-3. И то возможно будут нелепости с ногами, одеждой или с предметами. Но оставшийся результат сможет порадовать схожестью и даже творческой непредсказуемостью.
17:18
Возможно вы захотите примерить подходящий цвет костюма или стиль одежды.
... изображения с низким разрешением можно улучшить с помощью программы AIEnhancer. Она позволяет увеличивать разрешение, работать с тонкими настройками по улучшению качества, изменению размеров как изображения, так и текста.
* все изображения представлены здесь ради демонстрации возможностей технологии и являются генерациями ИИ.
P.S.
1) Правильно задать prompt, наверное, 3/4 успеха (max 1000 symb). Есть сервисы, кот. в этом могут помочь - берем похожую картинку из сети, загружаем и ... смотрим, как её описал ИИ (опция "Image To Stable Diffusion Prompt"). К слову, в самом weights создаются описания ко всем картинкам, кот. мы грузим для обучения модели.
2) Вот видео, как происходит генерация картинки в weights.
👍
5
🔥
1
... изображения с низким разрешением можно улучшить с помощью программы AIEnhancer. Она позволяет увеличивать разрешение, работать с тонкими настройками по улучшению качества, изменению размеров как изображения, так и текста.
* все изображения представлены здесь ради демонстрации возможностей технологии и являются генерациями ИИ.
P.S.
1) Правильно задать prompt, наверное, 3/4 успеха (max 1000 symb). Есть сервисы, кот. в этом могут помочь - берем похожую картинку из сети, загружаем и ... смотрим, как её описал ИИ (опция "Image To Stable Diffusion Prompt"). К слову, в самом weights создаются описания ко всем картинкам, кот. мы грузим для обучения модели.
2) Вот видео, как происходит генерация картинки в weights.
AH
03:24
А песни чьи?
Уже при первом знакомстве с Suno/ Udio меня интересовали 2 связанных момента:
а) как именно делается генерация (т.к. сам этим занимался),
б) кто автор в случае ИИ музыки.
Вопросы авторского права непростые даже в естественно-научных областях, а уж в сфере творчества ... Ради интереса гляньте статью (не из ГК РФ, а толкование) когда можно/ нельзя исполнять песню, делать кавер-версию - станет грустно. К примеру, если вы споёте дома с родственниками и выложите в Интернет без разрешения от автора, то это нарушение. Да и менять в песне ничего нельзя без согласования с правообладателем. И неважно, заработали вы на исполнении чужой песни или нет... Вы скажете "да кругом же все всё выкладывают и никого это не волнует" ... Ну, да, хотя ...
Я пытался представить, а как было бы справедливо, как по совести?
👍
1
Уже при первом знакомстве с Suno/ Udio меня интересовали 2 связанных момента:
а) как именно делается генерация (т.к. сам этим занимался),
б) кто автор в случае ИИ музыки.
Вопросы авторского права непростые даже в естественно-научных областях, а уж в сфере творчества ... Ради интереса гляньте статью (не из ГК РФ, а толкование) когда можно/ нельзя исполнять песню, делать кавер-версию - станет грустно. К примеру, если вы споёте дома с родственниками и выложите в Интернет без разрешения от автора, то это нарушение. Да и менять в песне ничего нельзя без согласования с правообладателем. И неважно, заработали вы на исполнении чужой песни или нет... Вы скажете "да кругом же все всё выкладывают и никого это не волнует" ... Ну, да, хотя ...
Я пытался представить, а как было бы справедливо, как по совести?
AH
00:29
Создание дуэтов в Udio.
Оказывается, сделать дуэт в Udio намного проще, чем в Suno. Все благодаря регулировке длины контекста Context Length, кот. многие игнорируют. Длина контекста составляет максимально 130 секунд и указывает насколько нейросеть учитывает уже созданный (или загруженный) фрагмент. И это уникальная возможность, кот. нет в Suno. Кстати, буквально несколько месяцев назад там было всего 30 сек.
Регулировка этого ползунка позволяет сменить мелодику или даже жанр в композиции, добавить новые инструменты. И в т.ч. добавить новые голоса при сохранении мелодии. Но в этом есть и минусы, создать композицию больше 5 мин. с точным сохранением ритмичного рисунка, который был за пределом «видимости» контекста, без использования сторонних аудио программ уже становится сложно.
👍
2
Оказывается, сделать дуэт в Udio намного проще, чем в Suno. Все благодаря регулировке длины контекста Context Length, кот. многие игнорируют. Длина контекста составляет максимально 130 секунд и указывает насколько нейросеть учитывает уже созданный (или загруженный) фрагмент. И это уникальная возможность, кот. нет в Suno. Кстати, буквально несколько месяцев назад там было всего 30 сек.
Регулировка этого ползунка позволяет сменить мелодику или даже жанр в композиции, добавить новые инструменты. И в т.ч. добавить новые голоса при сохранении мелодии. Но в этом есть и минусы, создать композицию больше 5 мин. с точным сохранением ритмичного рисунка, который был за пределом «видимости» контекста, без использования сторонних аудио программ уже становится сложно.
AH
22:22
Suno: а что под капотом?
Да, это то, что интересовало с первого знакомства. "Известно" - кролик думает, что бог это БОЛЬШОЙ КРОЛИК, дельфин - что ВЕЛИКИЙ ДЕЛЬФИН и т.д. ... Соответственно, я, занимаясь полжизни трансформацией, анализом и генерацией музыки в формальном представлении (Symbolic approach - MIDI/ партитура), думал, что и Suno на нём построено. Ошибался - не верил, что что-то приличное можно получить из спектра. Ан нет! Причем, в отличие от ИИ графики, где до сих пор у персонажа случается то 3 ноги, то 4/ 6 пальцев, в музыке (сбои не в счет) ошибок нет: и ноты, и ритм - правильные. Похоже потому, что сама музыка = математика/ физика - в ней всё строго, однако...
С Suno часто так: задаешь параметры, а на выходе что-то непредсказуемое. Да, удивление и разочарование - нередко первая реакция на поведение генеративных ИИ... Но если хотя бы в общем виде понимать, как "железяка" работает, пользоваться ей будет проще.
👍
1
Да, это то, что интересовало с первого знакомства. "Известно" - кролик думает, что бог это БОЛЬШОЙ КРОЛИК, дельфин - что ВЕЛИКИЙ ДЕЛЬФИН и т.д. ... Соответственно, я, занимаясь полжизни трансформацией, анализом и генерацией музыки в формальном представлении (Symbolic approach - MIDI/ партитура), думал, что и Suno на нём построено. Ошибался - не верил, что что-то приличное можно получить из спектра. Ан нет! Причем, в отличие от ИИ графики, где до сих пор у персонажа случается то 3 ноги, то 4/ 6 пальцев, в музыке (сбои не в счет) ошибок нет: и ноты, и ритм - правильные. Похоже потому, что сама музыка = математика/ физика - в ней всё строго, однако...
С Suno часто так: задаешь параметры, а на выходе что-то непредсказуемое. Да, удивление и разочарование - нередко первая реакция на поведение генеративных ИИ... Но если хотя бы в общем виде понимать, как "железяка" работает, пользоваться ей будет проще.
22:26
Это небольшая иллюстрация природы звука: аудио, волна и спектр - последние 9 сек (с 0:06) - "... I Got You" фрагмента композиции "I Feel Good" Джеймса Брауна, исполненные в моём давнем эксперименте с Vocaloid (Leon).
Чтобы ИИ сгенерировать музыку, ему надо правильно нарисовать Wave или Spectrum (одни из подходов).
Чтобы ИИ сгенерировать музыку, ему надо правильно нарисовать Wave или Spectrum (одни из подходов).
AH
00:11
Suno: почему такое поведение?
Lyrics, Prompt'ы, модели, DS... Хочу рассмотреть моменты, кот. вызывают множество вопросов.
С проф. Synth, вы получаете 2 книги - User Guide, Voice Name List (на ~150 стр.). C DAW у вас есть Help (встроенный, онлайн) + на форумах можно узнать о недокументированных функциях. Т.е. поведение этих Hard / Software вполне детерминировано. В Suno/ Udio у нас ~7 кнопок, 90% работает "на автомате" и результат часто непредсказуем. Из чего все складывается?
Влияние Style. Пусть у нас в Lyrics* НЕТ команд, влияющих на Style, как [Saxophone solo], [Distortion guitar] или [Expressive singer] - только разметка текста - [Verse], [Chorus] и т.п. Если в Style:
v1: Pop - то "хороших" моделей** много (например, 500);
v2: Pop, Acoustic - чуть меньше (скажем, 300);
v3: Pop, Acoustic, Harmonica solo - еще меньше (пусть, 50);
Для v1-v3 Suno, вероятно, сможет ОДИН трек сгенерить из ОДНОЙ модели.
* Lyrics и сам по себе влияет на выбор моделей.
** модель - реальный трек/ прототип в базе Suno.
👍
2
🔥
2
Lyrics, Prompt'ы, модели, DS... Хочу рассмотреть моменты, кот. вызывают множество вопросов.
С проф. Synth, вы получаете 2 книги - User Guide, Voice Name List (на ~150 стр.). C DAW у вас есть Help (встроенный, онлайн) + на форумах можно узнать о недокументированных функциях. Т.е. поведение этих Hard / Software вполне детерминировано. В Suno/ Udio у нас ~7 кнопок, 90% работает "на автомате" и результат часто непредсказуем. Из чего все складывается?
Влияние Style. Пусть у нас в Lyrics* НЕТ команд, влияющих на Style, как [Saxophone solo], [Distortion guitar] или [Expressive singer] - только разметка текста - [Verse], [Chorus] и т.п. Если в Style:
v1: Pop - то "хороших" моделей** много (например, 500);
v2: Pop, Acoustic - чуть меньше (скажем, 300);
v3: Pop, Acoustic, Harmonica solo - еще меньше (пусть, 50);
Для v1-v3 Suno, вероятно, сможет ОДИН трек сгенерить из ОДНОЙ модели.
* Lyrics и сам по себе влияет на выбор моделей.
** модель - реальный трек/ прототип в базе Suno.
00:16
[1] Suno, при нажатии кн. Create, выбирает 2 подходящие модели (из M1, M2, ... Mn). Из каждой модели может быть создано множество похожих треков (Similarities) - в итоге мы получаем два трека (A и B). При следующем нажатии (при тех же Style/ Lyrics), "выпадут" другие A и B. А что случится при усложнении Style?
v4: Pop, Acoustic, Harmonica solo, Khomus - этот набор может оказаться "конфликтным", т.к. не найдется модель "western country-pop ballad" с тувинским хомусом. В этом случае Suno с большой вероятностью будет использовать ДВЕ модели (т.е. добавит еще одну "от себя" с хомусом) или проигнорирует часть prompt'а. В итоге число вариаций скорее всего возрастет.
🔥
4
👍
1
v4: Pop, Acoustic, Harmonica solo, Khomus - этот набор может оказаться "конфликтным", т.к. не найдется модель "western country-pop ballad" с тувинским хомусом. В этом случае Suno с большой вероятностью будет использовать ДВЕ модели (т.е. добавит еще одну "от себя" с хомусом) или проигнорирует часть prompt'а. В итоге число вариаций скорее всего возрастет.
00:30
Есть еще одна причина вариативности - форма/ структура, заложенная в модели. Итоговая генерация, похоже, результат взаимодействия нескольких слоев:
а) структура текста;
б) тональный (мелодия, аккордовая
последовательность);
в) форма модели (ритмика/ фактура, Drum fills).
И непонятно что первично. Возможно, это определяется свойствами Lyrics. Если там строгий размер (ритм), то форма модели подбирается под текст. Если там, в смысле ритма, бред (например, инструкция к кофеварке), то текст подгоняется под форму модели. Или "движение с двух сторон" - и структура текста, и форма изменяются.
Для меня самым заметным является несостыковка структуры текста со структурой модели. Причем, явного расхождения гармонии с мелодией не наблюдал, а расхождение с формой (ритмикой, аккомпанементом, "сбивками"/ брейками) - многократно.
🔥
5
👍
1
а) структура текста;
б) тональный (мелодия, аккордовая
последовательность);
в) форма модели (ритмика/ фактура, Drum fills).
И непонятно что первично. Возможно, это определяется свойствами Lyrics. Если там строгий размер (ритм), то форма модели подбирается под текст. Если там, в смысле ритма, бред (например, инструкция к кофеварке), то текст подгоняется под форму модели. Или "движение с двух сторон" - и структура текста, и форма изменяются.
Для меня самым заметным является несостыковка структуры текста со структурой модели. Причем, явного расхождения гармонии с мелодией не наблюдал, а расхождение с формой (ритмикой, аккомпанементом, "сбивками"/ брейками) - многократно.
AH
14:13
Какой жанр?
При создании музыки самым первым вопросом стоит «А какой же точно музыкальный жанр использовать?». Думаю, многие, в том числе и я, узнали значительно больше о современной классификации стилей, жанров и поджанров при работе с подобными нейросетями. Так с чего же начать?
На вкладке Explore на сайте Suno есть список различных стилей и направлений. Всё это красиво крутится и можно сразу же прослушать несколько примеров в данном стиле. Всего там представлено 878 музыкальных стилей, я их собрал в отдельную таблицу на Гуглдок.
Другое дело, что это скорее просто показатель возможностей Suno. Лично я очень сомневаюсь в существовании отдельного стиля russian afrikaner folk или русского грайма. Но это очень интересно с точки зрения экспериментов и поиска нового. Кроме того список основных жанров можно найти на Suno Wiki (новом сайте).
🔥
6
При создании музыки самым первым вопросом стоит «А какой же точно музыкальный жанр использовать?». Думаю, многие, в том числе и я, узнали значительно больше о современной классификации стилей, жанров и поджанров при работе с подобными нейросетями. Так с чего же начать?
На вкладке Explore на сайте Suno есть список различных стилей и направлений. Всё это красиво крутится и можно сразу же прослушать несколько примеров в данном стиле. Всего там представлено 878 музыкальных стилей, я их собрал в отдельную таблицу на Гуглдок.
Другое дело, что это скорее просто показатель возможностей Suno. Лично я очень сомневаюсь в существовании отдельного стиля russian afrikaner folk или русского грайма. Но это очень интересно с точки зрения экспериментов и поиска нового. Кроме того список основных жанров можно найти на Suno Wiki (новом сайте).
14:19
Если всё это слишком «много» и на иностранных языках, всегда можно воспользоваться новым сервисом от Сбера в Tелеграм @gigachat_bot
Он открылся буквально перед НГ, и там на вкладке «Создать песню» можно поэкспериментировать с отечественной разработкой по генерации музыки. Вы можете выбрать из списка готовых жанров или описать свой. Можно создать как песню, так и инструментальную композицию. Как утверждают разработчики при создании использовалась интеграция нейросетей CLaMP и SymFormer. И датасет состоял из более чем 200 тысяч композиций разных музыкальных стилей: от классики до современной электронной и тяжёлой музыки.
Я попробовал и понял, что разметку текста «куплет-припев» пока данная нейросеть не понимает ни на каком языке. И результаты, мягко говоря, пока очень сомнительные. Но нейросеть новая, в открытом доступе буквально месяц, возможно, что в скором времени мы увидим дальнейшие обновления и музыкальные шедевры 😊
🔥
4
👍
2
Он открылся буквально перед НГ, и там на вкладке «Создать песню» можно поэкспериментировать с отечественной разработкой по генерации музыки. Вы можете выбрать из списка готовых жанров или описать свой. Можно создать как песню, так и инструментальную композицию. Как утверждают разработчики при создании использовалась интеграция нейросетей CLaMP и SymFormer. И датасет состоял из более чем 200 тысяч композиций разных музыкальных стилей: от классики до современной электронной и тяжёлой музыки.
Я попробовал и понял, что разметку текста «куплет-припев» пока данная нейросеть не понимает ни на каком языке. И результаты, мягко говоря, пока очень сомнительные. Но нейросеть новая, в открытом доступе буквально месяц, возможно, что в скором времени мы увидим дальнейшие обновления и музыкальные шедевры 😊
14:24
Поэтому вы можете самостоятельно попробовать смешать различные стили и жанры, добавить инструменты и посмотреть какой результат получится. В конце концов принцип
Nondeterminism - это наше всё при создании творческих произведений с помощью ИИ.
Вполне возможно и вы создадите что-нибудь, что войдет в историю музыки, как например композиция «Rumble» Линка Рэя 1958 года, которая стала родоначальником многих рок-жанров от сёрфа и гранжа до хеви. И которая, кстати, без слов (!), но была запрещена на некоторых радиостанциях в США как сомнительная и даже вульгарная для того времени. Именно там Линк придумал «power chord» и использовал дисторшн.
И небольшой лайфхак дня на сегодня.
Использование Музыкальных обозначений , принятых в классической музыке, а в основном они итальянские, такие как ostinato (настойчиво), rubato (свободно), teneramente (нежно) и т.д может значительно расширить мелодику ваших композиций как в Suno, так и в Udio.
👍
5
🔥
2
Nondeterminism - это наше всё при создании творческих произведений с помощью ИИ.
Вполне возможно и вы создадите что-нибудь, что войдет в историю музыки, как например композиция «Rumble» Линка Рэя 1958 года, которая стала родоначальником многих рок-жанров от сёрфа и гранжа до хеви. И которая, кстати, без слов (!), но была запрещена на некоторых радиостанциях в США как сомнительная и даже вульгарная для того времени. Именно там Линк придумал «power chord» и использовал дисторшн.
И небольшой лайфхак дня на сегодня.
Использование Музыкальных обозначений , принятых в классической музыке, а в основном они итальянские, такие как ostinato (настойчиво), rubato (свободно), teneramente (нежно) и т.д может значительно расширить мелодику ваших композиций как в Suno, так и в Udio.
AH
00:11
Suno: Смотрим prompt'ы у других.
Получил вопрос - "как сделать академическое пение и голос сопрано?" ... Давно, когда снова не получилось задать нужный Style, посмотрел, что вбивают другие. О, там много интересного - сам бы не догадался о таких командах. Правда, подтвердить на 100%, что они рабочие сложно, что-то работает, что-то - нет. Причины:
а) вариативность,
б) Lyrics можно изменить после публикации - т.е. трек не будет соответствовать тексту (!).
Скорее всего это попытки использовать шаблоны. Правда некоторые инструкции кажутся бредом, а может кто-то знает "секретный список" недокументированных команд вроде:
[15 seconds violin solo]
[Chord Progression: E♭ - B♭'D - Cm - A♭ ]
[Key Change: Modulate to F major]
[Noise reduce]
[Perfect EQ]
[Soft EDM Pad at 432 Hz with Atmospheric Sounds]
[Tempo: 128]
[Vocalist#564874856]
Ни одна из таких команд у меня не сработала. Смотрел чужие треки - там темп и гармония тоже не соответствовали командам. Наверное, надо больше экспериментировать 😊.
👏
5
👍
1
🤔
1
Получил вопрос - "как сделать академическое пение и голос сопрано?" ... Давно, когда снова не получилось задать нужный Style, посмотрел, что вбивают другие. О, там много интересного - сам бы не догадался о таких командах. Правда, подтвердить на 100%, что они рабочие сложно, что-то работает, что-то - нет. Причины:
а) вариативность,
б) Lyrics можно изменить после публикации - т.е. трек не будет соответствовать тексту (!).
Скорее всего это попытки использовать шаблоны. Правда некоторые инструкции кажутся бредом, а может кто-то знает "секретный список" недокументированных команд вроде:
[15 seconds violin solo]
[Chord Progression: E♭ - B♭'D - Cm - A♭ ]
[Key Change: Modulate to F major]
[Noise reduce]
[Perfect EQ]
[Soft EDM Pad at 432 Hz with Atmospheric Sounds]
[Tempo: 128]
[Vocalist#564874856]
Ни одна из таких команд у меня не сработала. Смотрел чужие треки - там темп и гармония тоже не соответствовали командам. Наверное, надо больше экспериментировать 😊.
00:14
Ищем что-то похожее. Процедура: [1] Search > [2] вбить ключи > [3] послушать, выбрать подходящий трек. Затем скопировать Style, да и в Lyrics команды посмотреть. Гарантий не очень много, что будет звучать также, что же ... можно еще какой-нибудь трек попробовать и т.д.
❤
3
00:17
Но есть более верный способ - Extend (продолжить) существующий трек: > 1,2,3,4.
❤
4
00:21
Т.е. мы сгенерим 2 трека, как продолжение существующего. Хорошо, если вначале* есть вступление, где "задаются" гармония, инструменты, вокал и т.п.
Вбиваем свой текст. Style лучше не менять, правда, тип вокала все-таки стоит указать. Особенно, если нужна смена гендера. Кажется, лучше его прописать недалеко от начала. Затем указываем время, с кот. нужно продолжить, пусть 0:34. Расширяем!
* за одну генерацию время (часть исходного + продолжение), похоже, не может превысить 4 мин. Т.е. можно продолжить и с 3:15, но тогда у нас всего 45 сек. Можно выбрать любой произвольный фрагмент из середины и использовать Upload Audio, но:
а) чужой трек скачать нельзя, придется его записать (например, с помощью link)... Усп!, Борис пишет, что можно на link 😊
б) качество, скорее всего, будет хуже. Да, и в конце концов, чем это отличается от того, чтобы взять нужный фрагмент "на стороне"?
Вбиваем свой текст. Style лучше не менять, правда, тип вокала все-таки стоит указать. Особенно, если нужна смена гендера. Кажется, лучше его прописать недалеко от начала. Затем указываем время, с кот. нужно продолжить, пусть 0:34. Расширяем!
* за одну генерацию время (часть исходного + продолжение), похоже, не может превысить 4 мин. Т.е. можно продолжить и с 3:15, но тогда у нас всего 45 сек. Можно выбрать любой произвольный фрагмент из середины и использовать Upload Audio, но:
а) чужой трек скачать нельзя, придется его записать (например, с помощью link)... Усп!, Борис пишет, что можно на link 😊
б) качество, скорее всего, будет хуже. Да, и в конце концов, чем это отличается от того, чтобы взять нужный фрагмент "на стороне"?
AH
02:18
Встречаем RIFFUSION
Новую старую музыкальную нейросеть.
О том, что некоторые разработчики работают над нейросетью для музыки на основе Stable Diffusion новости были еще год назад. Результат были мягко говоря не очень. Особенно в части вокала и мелодики.
Но наконец, по моему личному мнению, сегодня у них получилось.
🔥
2
Новую старую музыкальную нейросеть.
О том, что некоторые разработчики работают над нейросетью для музыки на основе Stable Diffusion новости были еще год назад. Результат были мягко говоря не очень. Особенно в части вокала и мелодики.
Но наконец, по моему личному мнению, сегодня у них получилось.
02:21
Riffusion
Новая модель Riffusion под названием FUZZ-0.7, которая вышла только сегодня, позволяет создавать композиции с хорошим качеством. Пока все бесплатно, но никто не знает сколько это продолжится.
Загрузка материала происходит как в SUNO целиком. Полностью и на отлично работает с разметкой песни. Выделю основные моменты, которые сразу обратили на себя внимание.
1. В разделе Sound где вводятся стили, жанры и т.д. работают автоподсказки как в Udio. Как только вы выберите pop, вам предложат дополнительные варианты pop-rock, pop dance, pop ballad и прочее. Лично мне это очень нравится.
2. При включении Advanced (расширенный режим), можно влиять на Sound Strength (близость к вашему prompt'у), Lyrics strength (влияние текста), Weirdness (вариативность) кажется похоже на Clarity в Udio. Также можно задать значение Seed для точного (при неизменных других параметрах) повторения генерации.
🔥
5
👍
3
Новая модель Riffusion под названием FUZZ-0.7, которая вышла только сегодня, позволяет создавать композиции с хорошим качеством. Пока все бесплатно, но никто не знает сколько это продолжится.
Загрузка материала происходит как в SUNO целиком. Полностью и на отлично работает с разметкой песни. Выделю основные моменты, которые сразу обратили на себя внимание.
1. В разделе Sound где вводятся стили, жанры и т.д. работают автоподсказки как в Udio. Как только вы выберите pop, вам предложат дополнительные варианты pop-rock, pop dance, pop ballad и прочее. Лично мне это очень нравится.
2. При включении Advanced (расширенный режим), можно влиять на Sound Strength (близость к вашему prompt'у), Lyrics strength (влияние текста), Weirdness (вариативность) кажется похоже на Clarity в Udio. Также можно задать значение Seed для точного (при неизменных других параметрах) повторения генерации.
AH
00:10
Suno: а что профессионалы?
Да, отношение к ИИ неоднозначное. Стоит ли спрашивать у тех, кто музыку ИИ не принимает вообще? Например, залип на том, что в молодости слушал - RadioHead, Depeche Mode - "теперь в группе играем только в этом стиле"... Двум джазистам (они "по жизни" всеядные и более гибкие) я задал вопрос "где косяки?"
Сергей КОКОРИН. Заслуженный артист Кубани. Лауреат международных фестивалей - Израиль, Швейцария, Япония, Россия. Был солистом оркестра Г.Гараняна, рук. "Black Sea - Band", членом экзаменационной госкомиссии МГИК. Работал с отечественными певцами (Манукян, Пугачёва, Кельми, Саруханов, Распутина...) С 1996 г. худрук и дирижёр оркестра "Биг-Бэнд Сочи" (y1 y2 y3).
Алексей ПЫСТИН. Самый востребованный джазовый пианист Новосибирска, аранжировщик, композитор, педагог. Организатор российских и международных джазовых фестивалей, арт-директор НИИКуДА и J&M. Создатель ансамбля "Hard Jazz Project" (ранее "Weekand"), автор 20-ти программ для Новосибирской гос. филармонии (y1 y2 VK).
🔥
1
Да, отношение к ИИ неоднозначное. Стоит ли спрашивать у тех, кто музыку ИИ не принимает вообще? Например, залип на том, что в молодости слушал - RadioHead, Depeche Mode - "теперь в группе играем только в этом стиле"... Двум джазистам (они "по жизни" всеядные и более гибкие) я задал вопрос "где косяки?"
Сергей КОКОРИН. Заслуженный артист Кубани. Лауреат международных фестивалей - Израиль, Швейцария, Япония, Россия. Был солистом оркестра Г.Гараняна, рук. "Black Sea - Band", членом экзаменационной госкомиссии МГИК. Работал с отечественными певцами (Манукян, Пугачёва, Кельми, Саруханов, Распутина...) С 1996 г. худрук и дирижёр оркестра "Биг-Бэнд Сочи" (y1 y2 y3).
Алексей ПЫСТИН. Самый востребованный джазовый пианист Новосибирска, аранжировщик, композитор, педагог. Организатор российских и международных джазовых фестивалей, арт-директор НИИКуДА и J&M. Создатель ансамбля "Hard Jazz Project" (ранее "Weekand"), автор 20-ти программ для Новосибирской гос. филармонии (y1 y2 VK).
AH
00:26
Одной песни альбом ?!
До Suno/ Udio и др. ... клиент заказывал и получал через нед./ мес. аранжировку, кот. сложно было изменить, а другую создавать было накладно... Сам автор, если обладал навыками игры и работы с hard/ software, был в выигрышном положение - выбирал стиль, записывал, полировал ... нед., мес., год ... но!, обычно это была одна версия. А если не угадал со стилем?
В рекламе одного нашего банка одно и тоже предложение (текст) подавалось "языком" потенциального клиента: пенсионера, студента, оленевода, бизнес-леди... Зачем? - чтобы сработало!
Наблюдения:
- иногда кавер популярнее исходной версии;
- авторам не всегда нравится то, что любит публика. Артист поёт новое, а зал требует песню 20-летней давности, от которой сам певец давно устал;
- шедевры порой создаются спонтанно*, а не в результате упорной работы по плану;
- зальник, звучащий, как правило, хуже, часто интереснее "вылизанной" студийной записи;
* по одной из версий Консуэло Веласкес написала Bésame mucho в возрасте 15-ти лет.
До Suno/ Udio и др. ... клиент заказывал и получал через нед./ мес. аранжировку, кот. сложно было изменить, а другую создавать было накладно... Сам автор, если обладал навыками игры и работы с hard/ software, был в выигрышном положение - выбирал стиль, записывал, полировал ... нед., мес., год ... но!, обычно это была одна версия. А если не угадал со стилем?
В рекламе одного нашего банка одно и тоже предложение (текст) подавалось "языком" потенциального клиента: пенсионера, студента, оленевода, бизнес-леди... Зачем? - чтобы сработало!
Наблюдения:
- иногда кавер популярнее исходной версии;
- авторам не всегда нравится то, что любит публика. Артист поёт новое, а зал требует песню 20-летней давности, от которой сам певец давно устал;
- шедевры порой создаются спонтанно*, а не в результате упорной работы по плану;
- зальник, звучащий, как правило, хуже, часто интереснее "вылизанной" студийной записи;
* по одной из версий Консуэло Веласкес написала Bésame mucho в возрасте 15-ти лет.
AH
15:25
Intro, Outro и… Sonauto
При создании песни или композиции довольно часто встает вопрос о логичном вступлении и концовке. Было время, когда все мои песни в Udio имели вступление ровно 32s. Так как именно этот отрезок можно там создать☺️.
Но выходят обновления, и для того чтобы сделать Intro (вступление), уложившись в задуманное время, достаточно в Udio обрезать расширение с помощью функции Trim. И затем отредактировать с функцией Inpaint, поставив начало композиции на ноль. Так же, только с точностью наоборот, можно поступить с Outro (завершение). Но эта функция платная.
В самом Suno нет возможности сделать новое вступление в композиции. Да и с концовкой бывает приходится повозиться, к тому же повлиять на время, за которое должна прозвучать концовка, мы тоже не можем. Поэтому сегодня мы ищем варианты, причем неожиданные и, главное, совершенно бесплатные.
При создании песни или композиции довольно часто встает вопрос о логичном вступлении и концовке. Было время, когда все мои песни в Udio имели вступление ровно 32s. Так как именно этот отрезок можно там создать☺️.
Но выходят обновления, и для того чтобы сделать Intro (вступление), уложившись в задуманное время, достаточно в Udio обрезать расширение с помощью функции Trim. И затем отредактировать с функцией Inpaint, поставив начало композиции на ноль. Так же, только с точностью наоборот, можно поступить с Outro (завершение). Но эта функция платная.
В самом Suno нет возможности сделать новое вступление в композиции. Да и с концовкой бывает приходится повозиться, к тому же повлиять на время, за которое должна прозвучать концовка, мы тоже не можем. Поэтому сегодня мы ищем варианты, причем неожиданные и, главное, совершенно бесплатные.
15:30
И поможет нам в этом Sonauto. Музыкальная нейросеть, которая существует уже давно (как я понимаю, их модель вышла раньше официальной Udio). Она имеет довольно серьезные проблемы с общей мелодикой (по моему мнению), создает композиции длительностью 1:35, но их можно дополнить в начале и в конце... и она ... с самым ужасным интерфейсом, который можно придумать.
Но! Эта модель имеет некоторые неоспоримые преимущества. Например:
Хороший звук, скачивание в формате WAV, скачивание стемов, использование Fancy Mode, когда генерация занимает больше времени, но качество звука выше - High Quality Mode. Также имеет в своем арсенале хорошо работающую функцию Inpaint.
И самое интересное - это приложение умеет делать расширение До и После, причем с заданными временными параметрами.
Текущая версия модели - Melodia v2 Beta 6, она вышла в начале января. И звучит уже значительно лучше, чем всего пару месяцев назад. Примечательно то, что это все бесплатно. У ребят даже нет никакого прайса на сайте😊
👍
6
Но! Эта модель имеет некоторые неоспоримые преимущества. Например:
Хороший звук, скачивание в формате WAV, скачивание стемов, использование Fancy Mode, когда генерация занимает больше времени, но качество звука выше - High Quality Mode. Также имеет в своем арсенале хорошо работающую функцию Inpaint.
И самое интересное - это приложение умеет делать расширение До и После, причем с заданными временными параметрами.
Текущая версия модели - Melodia v2 Beta 6, она вышла в начале января. И звучит уже значительно лучше, чем всего пару месяцев назад. Примечательно то, что это все бесплатно. У ребят даже нет никакого прайса на сайте😊
15:41
И лайфхак дня. Как скачать чужую песню в Suno
Песня в Suno имеет вид
Где 123... это буквенно-цифровой ID песни в библиотеке сайта (выделен жирным).
Достаточно вставить ID песни в следующий адрес
и откроется доступ к скачиванию композиции напрямую в формате mp3.
👍
16
👏
4
Песня в Suno имеет вид
https://suno.com/song/1234-aaa-5678-bbb Где 123... это буквенно-цифровой ID песни в библиотеке сайта (выделен жирным).
Достаточно вставить ID песни в следующий адрес
https://cdn1.suno.ai/1234-aaa-5678-bbb.mp3 и откроется доступ к скачиванию композиции напрямую в формате mp3.
AH
00:22
Suno: собираем речевой DS !
Генерация песни со своим голосом - самый удивительный результат с момента, как стало возможно использовать Upload Audio. Получилось это не сразу - с июля 2024 г. провел много экспериментов (L1, L2, L3) ... Примечательно, что McKinley H. - специалист в вокальных технологиях, познакомивший меня с RVC, тогда не знал о такой возможности Suno.
Я полагал, что в речевой DS (как и для RVC) нужно включить все фонемы, все регистры и все виды подачи (норм., придых, крик/ опора). Но уложить это в 60 сек. непросто: специальные фонетические тексты, где фонемы представлены согласно их статистики применения в реальной речи - очень длинные... Взял панграммы - предложения, включающие все буквы алфавита - это не совсем научно, но ... сработало.
Так и пользуюсь речевыми DS, кот. сделал по этому принципу. Возможно (надо тестить), этот подход можно улучшить, т.к. стали понятны некоторые особенности генерации вокала - он в Suno (в отличие от RVC) 3-х компонентный: тембр, интонация, артикуляция.
👍
9
Генерация песни со своим голосом - самый удивительный результат с момента, как стало возможно использовать Upload Audio. Получилось это не сразу - с июля 2024 г. провел много экспериментов (L1, L2, L3) ... Примечательно, что McKinley H. - специалист в вокальных технологиях, познакомивший меня с RVC, тогда не знал о такой возможности Suno.
Я полагал, что в речевой DS (как и для RVC) нужно включить все фонемы, все регистры и все виды подачи (норм., придых, крик/ опора). Но уложить это в 60 сек. непросто: специальные фонетические тексты, где фонемы представлены согласно их статистики применения в реальной речи - очень длинные... Взял панграммы - предложения, включающие все буквы алфавита - это не совсем научно, но ... сработало.
Так и пользуюсь речевыми DS, кот. сделал по этому принципу. Возможно (надо тестить), этот подход можно улучшить, т.к. стали понятны некоторые особенности генерации вокала - он в Suno (в отличие от RVC) 3-х компонентный: тембр, интонация, артикуляция.
AH
01:18
Литературный негр
Литерату́рный негр или гостра́йтер (от англ. ghostwriter, букв. «призрак-писатель») — автор в литературе, пишущий тексты на заказ (книги, статьи, автобиографии, тексты песен и т. п.) за другое лицо (Wiki)
В каждой модели генерации музыки есть ИИ, который позволяет создать текст песни по заданным запросам.
В Udio стоит неизвестная модель, скорее всего одна из версий ChatGPT, который имеет ограниченный функционал и довольно посредственные результаты.
Интересней в Suno, там стоит первая «classic» модель, которая тоже скорее на одной из версий ChatGPT. Почему я говорю скорее, потому что в открытых источниках не нашел данные об этих моделях в Suno и Udio. Только сравнительные тесты и некоторые баги, которые присущи этой языковой модели.
Литерату́рный негр или гостра́йтер (от англ. ghostwriter, букв. «призрак-писатель») — автор в литературе, пишущий тексты на заказ (книги, статьи, автобиографии, тексты песен и т. п.) за другое лицо (Wiki)
В каждой модели генерации музыки есть ИИ, который позволяет создать текст песни по заданным запросам.
В Udio стоит неизвестная модель, скорее всего одна из версий ChatGPT, который имеет ограниченный функционал и довольно посредственные результаты.
Интересней в Suno, там стоит первая «classic» модель, которая тоже скорее на одной из версий ChatGPT. Почему я говорю скорее, потому что в открытых источниках не нашел данные об этих моделях в Suno и Udio. Только сравнительные тесты и некоторые баги, которые присущи этой языковой модели.
01:20
Вторая модель в Suno называется ReMi (от Do Re Mi), она конечно намного креативней. И кстати, с помощью ее можно тщательно делать разметку текста. Если вы наведете курсор на нужную часть разметки и напишите просто даже на русском языке:
то этот запрос будет выполнен. (ил.1).
Возможно там есть еще какой-то интересный функционал, но я пока не нашел ничего полезного.
Другое дело Riffusion, тут все довольно интересно.
Во-первых, местный Ghostwriter делает приличные тексты. И если вы не пробовали еще, то попробуйте, даже в качестве помощника мозгового штурма. Во-вторых, он может вам помочь с разметкой песни, начиная от структуры «куплет-припев» и т.д. Заканчивая тегами стиля, жанра, инструментов, настроения и особенностей вокала. И тут самое интересное в Ghostwriter и начинается. ❗️
👍
1
Укажи номер куплета, используемые инструменты, на английском языке, заключи это все в квадратные скобкито этот запрос будет выполнен. (ил.1).
Возможно там есть еще какой-то интересный функционал, но я пока не нашел ничего полезного.
Другое дело Riffusion, тут все довольно интересно.
Во-первых, местный Ghostwriter делает приличные тексты. И если вы не пробовали еще, то попробуйте, даже в качестве помощника мозгового штурма. Во-вторых, он может вам помочь с разметкой песни, начиная от структуры «куплет-припев» и т.д. Заканчивая тегами стиля, жанра, инструментов, настроения и особенностей вокала. И тут самое интересное в Ghostwriter и начинается. ❗️
01:20
01:20
01:20
01:52
И очередной лайфхак дня.
В Udio при наборе текста при выбора знака слэш (косая черта вправо - " / ") появится дополнительная функция, которая помогает при разметке текста.
Быстро и удобно можно разметить текст песни с помощью [Verse] [Chorus] [Outro] [Choir] [Instrumental Bridge] и т.д.
Всего там встроено 28 тегов для разметки текста. Довольно удобно.
👍
8
В Udio при наборе текста при выбора знака слэш (косая черта вправо - " / ") появится дополнительная функция, которая помогает при разметке текста.
Быстро и удобно можно разметить текст песни с помощью [Verse] [Chorus] [Outro] [Choir] [Instrumental Bridge] и т.д.
Всего там встроено 28 тегов для разметки текста. Довольно удобно.
AH
12:31
Suno: собираем инструментальный DS !
На мой взгляд, такой DS самый простой в сборке и самый предсказуемый в поведении (в чем неоднократно убеждался - см. #2). Особенно, если он полный, однородный и прозрачный. Это не какие-то общеприменимые термины, поэтому требуют пояснений:
Полный - значит в нем представлены все инструменты, характерные для стиля: бас, ударные, ритм-секция, сольный инструмент. Т.е. заполнен весь диапазон (низкие, средние, высокие) основных тонов инструментов. К примеру, для бас-гитары это ~40... 400 Hz, для скрипки ~200... 3800 Hz. Если так, то Suno будет меньше добавлять от себя.
Однородный - т.е. нет "винегрета" и набор инструментов соответствует типичному набору конкретного стиля.
Прозрачный - аранжировка написана грамотно - ничего лишнего, инструменты "не мешают друг другу", а все их партии вместе образуют четкую ритмическую фактуру. Спектральная картинка в этом случае будет с хорошо различимыми, а не размытыми элементами.
👍
2
На мой взгляд, такой DS самый простой в сборке и самый предсказуемый в поведении (в чем неоднократно убеждался - см. #2). Особенно, если он полный, однородный и прозрачный. Это не какие-то общеприменимые термины, поэтому требуют пояснений:
Полный - значит в нем представлены все инструменты, характерные для стиля: бас, ударные, ритм-секция, сольный инструмент. Т.е. заполнен весь диапазон (низкие, средние, высокие) основных тонов инструментов. К примеру, для бас-гитары это ~40... 400 Hz, для скрипки ~200... 3800 Hz. Если так, то Suno будет меньше добавлять от себя.
Однородный - т.е. нет "винегрета" и набор инструментов соответствует типичному набору конкретного стиля.
Прозрачный - аранжировка написана грамотно - ничего лишнего, инструменты "не мешают друг другу", а все их партии вместе образуют четкую ритмическую фактуру. Спектральная картинка в этом случае будет с хорошо различимыми, а не размытыми элементами.
12:34
Рис. Сборка DS 130DlgIn1
Этот полный DS собран из минуса моей песни "Долги" (CD, "Место под солнцем", Vocaloid/ Leon, 2006). Сам трек с каким-то смешением стилей Punk, Club, Folk. И к однородному, прозрачному его вряд ли можно отнести: 2 баса, 2 DrumKits (Synth, Real), жалейка, баян, синты, включая Yamaha VL (Physical Modeling), на кот. записали зашумленный, хрипящий звук. Я "пожадничал" и включил в DS почти все - не только части с разной фактурой (Verse, Chorus, Bridge...), но и инструменты. Причем, даже "куплет" я составил из двух - 1-го (он по-проще) и 2-го (он насыщеннее)*.
Резал/клеил все в Reaper - в Audacity эти операции более трудоемкие, особенно, когда нужны fade'ы. (Или я еще плохо с ним знаком).
Если интересно, можете тестировать/ использовать этот DS - он в 320 kbps, дает неплохие результаты (и с разными гендерами, если это указывать в Style).
* на практике на самом деле нет необходимости в таких ухищрениях. Иногда вырезка цельного фрагмента (Verse, Chorus, Bridge) - вполне решает задачу.
Этот полный DS собран из минуса моей песни "Долги" (CD, "Место под солнцем", Vocaloid/ Leon, 2006). Сам трек с каким-то смешением стилей Punk, Club, Folk. И к однородному, прозрачному его вряд ли можно отнести: 2 баса, 2 DrumKits (Synth, Real), жалейка, баян, синты, включая Yamaha VL (Physical Modeling), на кот. записали зашумленный, хрипящий звук. Я "пожадничал" и включил в DS почти все - не только части с разной фактурой (Verse, Chorus, Bridge...), но и инструменты. Причем, даже "куплет" я составил из двух - 1-го (он по-проще) и 2-го (он насыщеннее)*.
Резал/клеил все в Reaper - в Audacity эти операции более трудоемкие, особенно, когда нужны fade'ы. (Или я еще плохо с ним знаком).
Если интересно, можете тестировать/ использовать этот DS - он в 320 kbps, дает неплохие результаты (и с разными гендерами, если это указывать в Style).
* на практике на самом деле нет необходимости в таких ухищрениях. Иногда вырезка цельного фрагмента (Verse, Chorus, Bridge) - вполне решает задачу.
12:44
P.S. Как измерить RMS в Audacity (3.7.0). Выделяем 5-15 сек (в самом громком месте трека), далее все по пп.
👍
4
AH
01:53
"Черный кот" и "Чертова дюжина"
Всем привет! На связи Борис. Сегодня опять о Sonauto - слов меньше, а песен больше. Речь исключительно об иностранных языках. Русского, похоже, нет - или я пока не нашел.
Музыкальные фрагменты ниже приведены из уважения к известным артистам. Многие их песни знаю наизусть и слушаю до сих пор. Все примеры созданы, чтобы показать возможности Sonauto, а как вы решите их использовать - на вашей совести.
ИИ технологии развиваются вне зависимости от наших предпочтений и желаний. Создание "новых песен" известных исполнителей я считаю не кощунством, а исключительно уважением к их таланту, к работам, имеющим мировое признание. Для меня, например, услышать голос Долорес О’Риордан, дорогого стоит.
👍
1
Всем привет! На связи Борис. Сегодня опять о Sonauto - слов меньше, а песен больше. Речь исключительно об иностранных языках. Русского, похоже, нет - или я пока не нашел.
Музыкальные фрагменты ниже приведены из уважения к известным артистам. Многие их песни знаю наизусть и слушаю до сих пор. Все примеры созданы, чтобы показать возможности Sonauto, а как вы решите их использовать - на вашей совести.
ИИ технологии развиваются вне зависимости от наших предпочтений и желаний. Создание "новых песен" известных исполнителей я считаю не кощунством, а исключительно уважением к их таланту, к работам, имеющим мировое признание. Для меня, например, услышать голос Долорес О’Риордан, дорогого стоит.
01:56
За последнее время у Sonauto было несколько нововведений. Я уже приводил пример 878 тегов жанра со страницы Suno Explore (см. Гуглдок). Но в Суно это скорее любопытно, чем полезно.
А вот Sonauto недавно представила визуальную карту тегов и список жанров и стилей, которые используются в их модели. И это вполне рабочий инструмент. Можно посмотреть в виде карты, можно скачать TXT файл - я собрал все это в Гуглдок 3425 тега жанров и стилей Sonauto , чтобы иметь под рукой.
Итак, там 3425 тега жанров и стилей. И в Sonauto в режиме Compose можно ввести только их. Через запятую и именно так, как они указаны в списке. Например нельзя написать тег Nu jazz (такой тег не существует), а только Nu-jazz.
Так чего же нет в этом списке? А в этом списке нет тегов Исполнителей. Но по факту они есть и они работают!
🔥
3
А вот Sonauto недавно представила визуальную карту тегов и список жанров и стилей, которые используются в их модели. И это вполне рабочий инструмент. Можно посмотреть в виде карты, можно скачать TXT файл - я собрал все это в Гуглдок 3425 тега жанров и стилей Sonauto , чтобы иметь под рукой.
Итак, там 3425 тега жанров и стилей. И в Sonauto в режиме Compose можно ввести только их. Через запятую и именно так, как они указаны в списке. Например нельзя написать тег Nu jazz (такой тег не существует), а только Nu-jazz.
Так чего же нет в этом списке? А в этом списке нет тегов Исполнителей. Но по факту они есть и они работают!
01:59
При чем здесь Черный кот, спросите вы? Мне требовался пример для иллюстрации работы нейросети... я вспомнил, что читал, что песне про «Черного кота» (Ю.Саульский, М.Танич) исполнилось ровно 60 лет... И каждый, от мала до велика, знает и поет эту песню. Поэтому я и решил использовать перевод, который нашел в интернете.
В качестве примера приведены 2 куплета и 2 припева песни про «Черного кота». Перевод далек от совершенства - носитель языка сказал, что это ужасный перевод и сделан не носителем языка. На самом деле это просто примеры для демонстрации технологии. Знатоки и носители разных языков могут попробовать и сделать свои варианты - в конце концов это бесплатно и интересно.
👍
3
В качестве примера приведены 2 куплета и 2 припева песни про «Черного кота». Перевод далек от совершенства - носитель языка сказал, что это ужасный перевод и сделан не носителем языка. На самом деле это просто примеры для демонстрации технологии. Знатоки и носители разных языков могут попробовать и сделать свои варианты - в конце концов это бесплатно и интересно.
04:08
И лайфхак дня. Яйца в аэрогриле можно сварить вкрутую ровно за 13 минут при температуре 160 градусов. Ой, извините! Не тот лайфхак. Хотя тоже нужный! 😊
Если вы пользуетесь Bandlab, то, возможно, вам интересно будет попробовать мобильную версию приложения с сайта 4PDA - там есть версии с разблокированными возможностями Pro.
Важное - модификации не работают с гугл аккаунтами. Но вы всегда можете создать новую учетную запись через компьютер, использовав обычную почту. Создать новый проект, потом зайти с телефона и работать с ним.
... разблокированы функции интенсивности и варианты Пространство, Кинематографичность и т.д. для быстрого ИИ-мастеринга.
👍
6
👏
2
😁
2
Если вы пользуетесь Bandlab, то, возможно, вам интересно будет попробовать мобильную версию приложения с сайта 4PDA - там есть версии с разблокированными возможностями Pro.
Важное - модификации не работают с гугл аккаунтами. Но вы всегда можете создать новую учетную запись через компьютер, использовав обычную почту. Создать новый проект, потом зайти с телефона и работать с ним.
... разблокированы функции интенсивности и варианты Пространство, Кинематографичность и т.д. для быстрого ИИ-мастеринга.
AH
19:40
Sonauto: а на русском споёшь?
Борис пару дней назад сомневался, правда, в тот же вечер прислал пример ("Zara_BC"). Я Sonauto пробовал еще пару мес. назад вкупе с 10-й др. сервисов и как-то проскочил. И вот 28 февр. решил посмотреть подробнее.
В примерах поразил звук - тарелки чистые и голос не хорусит (как в Suno)! Скачал десяток в WAV: 44,1 kHz 16 bit (1411 kbps), полоса до 20 kHz, RMS -17... -14.2 dB, в паузах -55 dB (шум студийного тракта), панорама - ОК, т.е. по сути качество Audio CD - см. трек Good_Frg.
Начал пробовать на русском - ужас. То нет вокала, то грязный. Какой стиль не ставишь - на выходе ближе к Heavy Metal, может и В.Кипелов/ "Ария". Косяки М/Ж, был и чужой текст - какие-то "ошмётки", видимо из исходника - см. трек BadRu_Frg.
Потом вспомнил давний опыт (~2005), когда надо было заставить англо-поющего робота (Vocaloid/ Leon) спеть на русском - см. трек Yest_Tolko_Mig. Тогда в первый раз столкнулся с тем, что спеть без акцента, используя англ. фонемы, нельзя. Но... таки решил попробовать.
👍
2
❤
1
Борис пару дней назад сомневался, правда, в тот же вечер прислал пример ("Zara_BC"). Я Sonauto пробовал еще пару мес. назад вкупе с 10-й др. сервисов и как-то проскочил. И вот 28 февр. решил посмотреть подробнее.
В примерах поразил звук - тарелки чистые и голос не хорусит (как в Suno)! Скачал десяток в WAV: 44,1 kHz 16 bit (1411 kbps), полоса до 20 kHz, RMS -17... -14.2 dB, в паузах -55 dB (шум студийного тракта), панорама - ОК, т.е. по сути качество Audio CD - см. трек Good_Frg.
Начал пробовать на русском - ужас. То нет вокала, то грязный. Какой стиль не ставишь - на выходе ближе к Heavy Metal, может и В.Кипелов/ "Ария". Косяки М/Ж, был и чужой текст - какие-то "ошмётки", видимо из исходника - см. трек BadRu_Frg.
Потом вспомнил давний опыт (~2005), когда надо было заставить англо-поющего робота (Vocaloid/ Leon) спеть на русском - см. трек Yest_Tolko_Mig. Тогда в первый раз столкнулся с тем, что спеть без акцента, используя англ. фонемы, нельзя. Но... таки решил попробовать.
20:01
AH
03:42
Suno: собираем вокальный DS !
Вокальный* DS включает голос, может дополняться Hi-Hat для задания ритма и аккордом/ нотой для задания тональности. Цели:
а) получить трек с голосом в DS,
б) получить аранжировку к мелодии в DS.
Летом 24-го по этой теме провел ряд экспериментов с анализом - L1, L2, L3.
* см. посты по речевому и инструментальному DS.
Suno в вокале поправляет ритмику, выполняет autotune, расширяет исходный диапазон и набор исполнительских приёмов - например, добавит шепот/ крик, чего в DS не было. Можно что-то "промычать" мимо нот и ритма, можно и без добавления Hi-Hat. Но надо иметь ввиду, что Suno в DS "пытается" определить и темп, и тональность (которые, обычно, сохраняются в генерации). Поэтому Hi-Hat желателен. Если у вас в DS Verse + Chorus, а в Lyrics тот же текст, то Suno будет стараться сохранить и мелодию - см. L4. В общем, Suno будет брать за основу то, что в DS.
Мне показалось, что чем более голос проработан/ "поставлен", тем больше шансов на его сохранение в генерации.
🔥
3
Вокальный* DS включает голос, может дополняться Hi-Hat для задания ритма и аккордом/ нотой для задания тональности. Цели:
а) получить трек с голосом в DS,
б) получить аранжировку к мелодии в DS.
Летом 24-го по этой теме провел ряд экспериментов с анализом - L1, L2, L3.
* см. посты по речевому и инструментальному DS.
Suno в вокале поправляет ритмику, выполняет autotune, расширяет исходный диапазон и набор исполнительских приёмов - например, добавит шепот/ крик, чего в DS не было. Можно что-то "промычать" мимо нот и ритма, можно и без добавления Hi-Hat. Но надо иметь ввиду, что Suno в DS "пытается" определить и темп, и тональность (которые, обычно, сохраняются в генерации). Поэтому Hi-Hat желателен. Если у вас в DS Verse + Chorus, а в Lyrics тот же текст, то Suno будет стараться сохранить и мелодию - см. L4. В общем, Suno будет брать за основу то, что в DS.
Мне показалось, что чем более голос проработан/ "поставлен", тем больше шансов на его сохранение в генерации.
15:11
= задать темп [3],
= число ударов на такт [4],
= сколько тактов [5],
= Сгенерировать! [6].
👍
4
= число ударов на такт [4],
= сколько тактов [5],
= Сгенерировать! [6].
15:12
2. Подгоняем темп/ скорость Hi-Hat - по пп. [1,2,3] под Ритм-трек.
= Задаем уровень и панораму Hi-Hat.
= Выключаем Ритм-трек [4].
= Выделяем (по отметкам Ритм-трека) до 60 сек.
Можно сохранять DS!
👍
7
= Задаем уровень и панораму Hi-Hat.
= Выключаем Ритм-трек [4].
= Выделяем (по отметкам Ритм-трека) до 60 сек.
Можно сохранять DS!
AH
03:34
Suno: собираем полный DS !
Такой DS нужен для генерации трека в точном стиле исходной песни* - включая голос, с возможной заменой языка (и гендера) - типа, пусть Eagles споют как в "Hotel California" на рус. 😀... Основное по этому вопросу я уже излагал, здесь лишь штрихи для завершения цикла о DS.
* Борис показал (и я попробовал) - Sonauto генерит песню в манере артиста (если он в базе), но, кажется, не в стиле конкретной песни. К примеру, этот prompt адресует ко всему альбому Queen.
Полных DS я собрал >100, как наших (Ru), так и зарубежных (En), и современных, и 1920-30-х, и акустических, и электронных, и М, и Ж. Часть работали хорошо, какие-то не очень (генерация грязная или система много добавляет своего - зависит от качества звука исходного трека).
Бывало даже так: задаю (в Suno) Style один, другой - не то... вдруг слышу по TV интересный, подходящий трек, отматываю, записываю (или нахожу его на YouTube), делаю DS - Вуаля! Примеры: "Бледно-розовый оттенок" v6.0, "Новый год станет ..." v2b, v1b.
👍
5
🔥
1
Такой DS нужен для генерации трека в точном стиле исходной песни* - включая голос, с возможной заменой языка (и гендера) - типа, пусть Eagles споют как в "Hotel California" на рус. 😀... Основное по этому вопросу я уже излагал, здесь лишь штрихи для завершения цикла о DS.
* Борис показал (и я попробовал) - Sonauto генерит песню в манере артиста (если он в базе), но, кажется, не в стиле конкретной песни. К примеру, этот prompt адресует ко всему альбому Queen.
Полных DS я собрал >100, как наших (Ru), так и зарубежных (En), и современных, и 1920-30-х, и акустических, и электронных, и М, и Ж. Часть работали хорошо, какие-то не очень (генерация грязная или система много добавляет своего - зависит от качества звука исходного трека).
Бывало даже так: задаю (в Suno) Style один, другой - не то... вдруг слышу по TV интересный, подходящий трек, отматываю, записываю (или нахожу его на YouTube), делаю DS - Вуаля! Примеры: "Бледно-розовый оттенок" v6.0, "Новый год станет ..." v2b, v1b.
AH
01:14
Персональная модель вокалиста.
Из телефонного разговора:
В: "... привет, Макс, на днях послушал твои последние треки - круто, ты что, звукаря или аранжировщика поменял, и манеру слегка?... Давай вечером подскачу - потолкуем?"
М: "Привет! ... Влад, ну ... подскачи, только я 3-й месяц на Мальдивах 😀".
В: "Аааа ... красава! Чё, дистанционно пишешь?"
М: "Нет, ... вообще не пишу. Точнее, Я не пишу - Ден все делает. Там же, в моей студии или у себя в Митино, кто его знает 😀".
В: "Как? ... я же слышу - это реально ты!"
М: "Ты слышишь? Я тоже, ха ха ха ! ... Ден каких-то айтишников нанял, они на моих треках ... интеллект, ну, ... типа робота, комп научили петь ... точно как я... после тьюнинга. Может даже лучше ... Присылает мне 3-4 песни в неделю - по несколько вариантов ... выбираю самые интересные ... он публикует ... Влад, только ты никому, слышь, ... ни-ко-му, понял? Братан, я серьезно, НИ-КО-МУ!"
😁
3
Из телефонного разговора:
В: "... привет, Макс, на днях послушал твои последние треки - круто, ты что, звукаря или аранжировщика поменял, и манеру слегка?... Давай вечером подскачу - потолкуем?"
М: "Привет! ... Влад, ну ... подскачи, только я 3-й месяц на Мальдивах 😀".
В: "Аааа ... красава! Чё, дистанционно пишешь?"
М: "Нет, ... вообще не пишу. Точнее, Я не пишу - Ден все делает. Там же, в моей студии или у себя в Митино, кто его знает 😀".
В: "Как? ... я же слышу - это реально ты!"
М: "Ты слышишь? Я тоже, ха ха ха ! ... Ден каких-то айтишников нанял, они на моих треках ... интеллект, ну, ... типа робота, комп научили петь ... точно как я... после тьюнинга. Может даже лучше ... Присылает мне 3-4 песни в неделю - по несколько вариантов ... выбираю самые интересные ... он публикует ... Влад, только ты никому, слышь, ... ни-ко-му, понял? Братан, я серьезно, НИ-КО-МУ!"
01:17
P.S. ... когда я организовывал в Новосибирской консерватории первый в СССР класс муз. компьютеров, на меня писали анонимки, вроде "...собирает в подвале из ворованных радиодеталей синтезаторы на продажу ... ☝" - некоторые педагоги боялись, что компьютеры их заменят ... Сейчас такие воспоминания вызывают улыбку 😀. (На фото мой коллектив в НГК. Новосибирск, ~1988 г.)
👍
16
❤
6
😁
5
👏
4
AH
17:11
ВНИМАНИЕ КОНКУРС!
Наши коллеги устроили конкурс на лучший кавер песни на русском языке. Приглашаем всех принять участие в голосовании!
В этот раз выбрана песня "How Deep Is Your Love" группы Take That.
Можно участвовать в еженедельных конкурсах на лучшие кавера от нейро-музыкантов.
Для победителя предусмотрен денежный приз! 💸🎁👌
Голосование анонимное для чистоты результатов. К участию в конкурсах приглашаются как создатели ИИ-музыки, так и те, кто занимается эквиритмическим переводом песен.
Можно предлагать как варианты с сохранением изначальной музыки и голоса, так и варианты ремиксов и каверов песен в другом стиле и жанре. Оценивается общая креативность и подход к решению этой непростой задачи.
Вот ссылка на голосование.
🔥
8
😁
1
Наши коллеги устроили конкурс на лучший кавер песни на русском языке. Приглашаем всех принять участие в голосовании!
В этот раз выбрана песня "How Deep Is Your Love" группы Take That.
Можно участвовать в еженедельных конкурсах на лучшие кавера от нейро-музыкантов.
Для победителя предусмотрен денежный приз! 💸🎁👌
Голосование анонимное для чистоты результатов. К участию в конкурсах приглашаются как создатели ИИ-музыки, так и те, кто занимается эквиритмическим переводом песен.
Можно предлагать как варианты с сохранением изначальной музыки и голоса, так и варианты ремиксов и каверов песен в другом стиле и жанре. Оценивается общая креативность и подход к решению этой непростой задачи.
Вот ссылка на голосование.
AH
22:54
RIFFUSION. Замена вокала. Замена музыки.
Всем привет, на связи Борис, продолжаем изучать музыкальные нейросети! Надеюсь, вы обратили внимание на конкурс каверов и оценили треки мастеров ⬆️. Лично я считаю, что это очень крутая работа, требующая и мастерства, и времени.
А сегодня хочу обратить ваше внимание на вчерашнее обновление функционала в Riffusion. В существующую модель FUZZ-0.8 были встроены новые функции:
1. Замена вокала
2. Замена звука (минусовки / backing track)
Можно создать инстр. композицию или песню, или загрузить из внешнего источника (Upload Audio), а потом изменить вокал (М/Ж, дуэт). И даже изменить стиль песни. Более полное описание см. на сайте.
Изменить вокал можно с сохранением музыки, а "минус" можно изменить, не меняя оригинальный голос. Справа от звуковой дорожки есть вариативная настройка музыки или голоса в %% от оригинала.
Повторю - можно загружать свои песни и инстр. композиции, но их продолжительность не должна превышать 4 минуты.
👍
3
🔥
2
Всем привет, на связи Борис, продолжаем изучать музыкальные нейросети! Надеюсь, вы обратили внимание на конкурс каверов и оценили треки мастеров ⬆️. Лично я считаю, что это очень крутая работа, требующая и мастерства, и времени.
А сегодня хочу обратить ваше внимание на вчерашнее обновление функционала в Riffusion. В существующую модель FUZZ-0.8 были встроены новые функции:
1. Замена вокала
2. Замена звука (минусовки / backing track)
Можно создать инстр. композицию или песню, или загрузить из внешнего источника (Upload Audio), а потом изменить вокал (М/Ж, дуэт). И даже изменить стиль песни. Более полное описание см. на сайте.
Изменить вокал можно с сохранением музыки, а "минус" можно изменить, не меняя оригинальный голос. Справа от звуковой дорожки есть вариативная настройка музыки или голоса в %% от оригинала.
Повторю - можно загружать свои песни и инстр. композиции, но их продолжительность не должна превышать 4 минуты.
22:55
Для сегодняшнего эксперимента я взял песню "Этот город" группы Браво (Жуков/Хавтан) - думаю, её многие знают по тексту. Сделал 3 примера с заменами:
а) голос М на Ж
б) голос М на Ж и изменение музыки
в) голос М на др. М и изменение музыки
Важное. Если вам тоже не терпится поэкспериментировать с какими-либо известными песнями, то имейте ввиду, что у Riffusion хорошая защита копирайтинга (на сегодня, пожалуй, лучше, чем у Suno и Udio). Плюс алгоритм постоянно улучшают, т.ч. придется "поколдовать". Но, об этом, думаю, мы поговорим отдельно.
P.S. 1. Да, не стоит забывать и о двух других крайне полезных функциях. Это Replace - замена части песни. И Cover, придающий песне другое звучание. С ними появляется большое поле для экспериментов, как с голосом (своим или чужим), так и с музыкой.
2. Riffusion, оставаясь пока совершенно бесплатным приложением, развивается, надо признать, довольно быстрыми темпами. За последний месяц они ввели и загрузку WAV, и возможность упорядочить файлы в проектах.
🔥
5
а) голос М на Ж
б) голос М на Ж и изменение музыки
в) голос М на др. М и изменение музыки
Важное. Если вам тоже не терпится поэкспериментировать с какими-либо известными песнями, то имейте ввиду, что у Riffusion хорошая защита копирайтинга (на сегодня, пожалуй, лучше, чем у Suno и Udio). Плюс алгоритм постоянно улучшают, т.ч. придется "поколдовать". Но, об этом, думаю, мы поговорим отдельно.
P.S. 1. Да, не стоит забывать и о двух других крайне полезных функциях. Это Replace - замена части песни. И Cover, придающий песне другое звучание. С ними появляется большое поле для экспериментов, как с голосом (своим или чужим), так и с музыкой.
2. Riffusion, оставаясь пока совершенно бесплатным приложением, развивается, надо признать, довольно быстрыми темпами. За последний месяц они ввели и загрузку WAV, и возможность упорядочить файлы в проектах.
AH
15:24
Ай да Riffusion, ай да Swap !
Честно говоря, меня так зацепили примеры в посте Бориса с заменой вокала и музыки в Riffusion, что я решил посмотреть повнимательнее, что же там ИИ наделал с мелодией.
Ниже 2 трека - фрагменты только с Verse3 и Chorus. В них разнесённые по каналам вокалы - исходный (L) и измененный (R), + Hi-Hat. Мелодии в треках "Браво Женский вокал" и "Браво Женский Синтипоп" одинаковые.
Для наглядности сделал иллюстрации (Piano-roll) для Verse3 ⬆ и Chorus ⬇ - изменённые ноты обведены. Внимание больше на изменения тона (нот), а не на нюансы в ритмике.
! Мелодия при смене голоса (или гендера) сохраняется не полностью - т.ч. здесь не RVC (split > смена тембра > сборка), а генерация/ синтез.
Да, прослушивать лучше в головных телефонах.
🔥
6
Честно говоря, меня так зацепили примеры в посте Бориса с заменой вокала и музыки в Riffusion, что я решил посмотреть повнимательнее, что же там ИИ наделал с мелодией.
Ниже 2 трека - фрагменты только с Verse3 и Chorus. В них разнесённые по каналам вокалы - исходный (L) и измененный (R), + Hi-Hat. Мелодии в треках "Браво Женский вокал" и "Браво Женский Синтипоп" одинаковые.
Для наглядности сделал иллюстрации (Piano-roll) для Verse3 ⬆ и Chorus ⬇ - изменённые ноты обведены. Внимание больше на изменения тона (нот), а не на нюансы в ритмике.
! Мелодия при смене голоса (или гендера) сохраняется не полностью - т.ч. здесь не RVC (split > смена тембра > сборка), а генерация/ синтез.
Да, прослушивать лучше в головных телефонах.
15:26
О гармонизации здесь
В "Браво Женский Синтипоп" и "Браво Мужской Рок" выполнена замена музыки ("минусовки"/ backing track) с отличным от оригинала стилем.
а) Для одной и той же мелодии может быть много вариантов гармонизации.
б) Задавая стиль, мы принуждаем систему следовать ему и в характере гармонии*. "Браво Женский Синтипоп" звучит свежо, но Ruffusion не везде справляется с гармонизацией**, может поэтому и чуть меняет мелодию.
в) В "Браво Мужской Рок" гармонических изменений не много, т.к. стиль ближе к оригинальному треку, но и здесь есть недоработки**
г) Местами есть несовпадение "размера" мелодии с длиной секвенции - типа, фразы по 8 тактов, а секвенции по 6 и т.п.
* То, что стандарт для Jazz'а, будет странным в ElectroPop. Что норма для Country - вряд ли адекватно "сработает" в EDM.
** речь не о недопустимых косяках, а об ошибках, которые делают музыканты- новички, переигравшие еще мало чужой музыки и не накопившие (в голове и пальцах) гармонических шаблонов, характерных для конкретного стиля.
В "Браво Женский Синтипоп" и "Браво Мужской Рок" выполнена замена музыки ("минусовки"/ backing track) с отличным от оригинала стилем.
а) Для одной и той же мелодии может быть много вариантов гармонизации.
б) Задавая стиль, мы принуждаем систему следовать ему и в характере гармонии*. "Браво Женский Синтипоп" звучит свежо, но Ruffusion не везде справляется с гармонизацией**, может поэтому и чуть меняет мелодию.
в) В "Браво Мужской Рок" гармонических изменений не много, т.к. стиль ближе к оригинальному треку, но и здесь есть недоработки**
г) Местами есть несовпадение "размера" мелодии с длиной секвенции - типа, фразы по 8 тактов, а секвенции по 6 и т.п.
* То, что стандарт для Jazz'а, будет странным в ElectroPop. Что норма для Country - вряд ли адекватно "сработает" в EDM.
** речь не о недопустимых косяках, а об ошибках, которые делают музыканты- новички, переигравшие еще мало чужой музыки и не накопившие (в голове и пальцах) гармонических шаблонов, характерных для конкретного стиля.
AH
13:10
Новый КОНКУРС!
Наши коллеги продолжают конкурс на лучший кавер песни на русском языке. Лично мне эта тема очень интересна, к тому же она требует хороших навыков и мастерства.
В этот раз выбрана песня "Lady" дуэта Modjo.
Можно участвовать в еженедельных конкурсах на лучшие кавера от нейро-музыкантов.
Для победителя там предусмотрен денежный приз! 🎁👌
К участию в конкурсах приглашаются как создатели ИИ-музыки, так и те, кто занимается эквиритмическим переводом песен.
Оценивается общая креативность и подход. Послушать знакомую песню, но на русском языке с сохранением голоса и смысла это довольно интересно! Вот ссылка на голосование.
В качестве примера предлагаю послушать работу победителя прошлого конкурса. Тогда для голосования была выбрана песня "How Deep Is Your Love" группы Take That.
И мой собственный скромный вариант попытки юмористического кавера, но на русскоязычную песню "Остров невезения", которую, конечно, все прекрасно знают. 😊
Наши коллеги продолжают конкурс на лучший кавер песни на русском языке. Лично мне эта тема очень интересна, к тому же она требует хороших навыков и мастерства.
В этот раз выбрана песня "Lady" дуэта Modjo.
Можно участвовать в еженедельных конкурсах на лучшие кавера от нейро-музыкантов.
Для победителя там предусмотрен денежный приз! 🎁👌
К участию в конкурсах приглашаются как создатели ИИ-музыки, так и те, кто занимается эквиритмическим переводом песен.
Оценивается общая креативность и подход. Послушать знакомую песню, но на русском языке с сохранением голоса и смысла это довольно интересно! Вот ссылка на голосование.
В качестве примера предлагаю послушать работу победителя прошлого конкурса. Тогда для голосования была выбрана песня "How Deep Is Your Love" группы Take That.
И мой собственный скромный вариант попытки юмористического кавера, но на русскоязычную песню "Остров невезения", которую, конечно, все прекрасно знают. 😊
ТО Boris
👍
9
AH
17:01
Song Prompt Assistant
SPA - десктопное веб-приложение для сборки Prompt, Template (инструкции) и Song Structure (Verse, Chorus...), но ... по-порядку.
Неделя вышла удивительная - программировал почти все время, немного отключился от ИИ негатива (что-то стало платным, результат мало предсказуем, папки и файлы множатся, в голове путаница - в чём что делал - Suno, Udio, Riffusion, Sonauto ...? и где какие особенности 😔).
В HTML, PHP, JS, Jq, css все как-то определеннее (без ИИ пока) - что задал, то, в основном, и выполняется. Ну, и приятно что-то сделать своими руками.
1. Сначала хотел написать простую программку, упрощающую сборку структуры - чтобы не копировать из предыдущих песен и легче менять.
2. Потом стал составлять список артистов, которые "генерятся" в Sonauto. Спросил что есть у Бориса - он кинул мне ссылку, где пара сотен имён!
3. Плюс, в канале Яны море промптов, да и у самого уже много накопилось...
В общем понял, что надо написать приложение, чтобы хотя бы что-то упорядочить.
👍
10
❤
1
SPA - десктопное веб-приложение для сборки Prompt, Template (инструкции) и Song Structure (Verse, Chorus...), но ... по-порядку.
Неделя вышла удивительная - программировал почти все время, немного отключился от ИИ негатива (что-то стало платным, результат мало предсказуем, папки и файлы множатся, в голове путаница - в чём что делал - Suno, Udio, Riffusion, Sonauto ...? и где какие особенности 😔).
В HTML, PHP, JS, Jq, css все как-то определеннее (без ИИ пока) - что задал, то, в основном, и выполняется. Ну, и приятно что-то сделать своими руками.
1. Сначала хотел написать простую программку, упрощающую сборку структуры - чтобы не копировать из предыдущих песен и легче менять.
2. Потом стал составлять список артистов, которые "генерятся" в Sonauto. Спросил что есть у Бориса - он кинул мне ссылку, где пара сотен имён!
3. Плюс, в канале Яны море промптов, да и у самого уже много накопилось...
В общем понял, что надо написать приложение, чтобы хотя бы что-то упорядочить.
AH
23:40
Inpaint and Replace
Красим и меняем.
Всем привет, на связи Борис, сегодня будем «закрашивать» музыкальные композиции. Лично для меня это, пожалуй, основная функция, позволяющая достичь точности и гармонии в музыке ИИ.
В Udio и Sonauto она называется Inpaint.
В Riffusion и Suno - Replace. Ее задача - заменить часть музыки или слов в песне.
Можно изменить мелодию на определенном отрывке. Сделать замену текста - изменить слова и даже одно слово с неверным ударением. Можно точно сделать концовку или начало композиции, просто «закрашивая» нужный фрагмент. Система учитывает контекст ДО, ПОСЛЕ и внутри сегмента и создает новое - где-то лучше, где-то хуже.
Где еще эта функция может пригодиться, кроме замены нескольких нот или слов?
Красим и меняем.
Всем привет, на связи Борис, сегодня будем «закрашивать» музыкальные композиции. Лично для меня это, пожалуй, основная функция, позволяющая достичь точности и гармонии в музыке ИИ.
В Udio и Sonauto она называется Inpaint.
В Riffusion и Suno - Replace. Ее задача - заменить часть музыки или слов в песне.
Можно изменить мелодию на определенном отрывке. Сделать замену текста - изменить слова и даже одно слово с неверным ударением. Можно точно сделать концовку или начало композиции, просто «закрашивая» нужный фрагмент. Система учитывает контекст ДО, ПОСЛЕ и внутри сегмента и создает новое - где-то лучше, где-то хуже.
Где еще эта функция может пригодиться, кроме замены нескольких нот или слов?
ТО Boris
23:41
Смотрим какая длительность куплета. Получается ~ 28 сек. Именно столько тишины нужно добавить в середину песни.
Выбираем подходящее место «с запасом» для окрашивания. Пункт Генерировать – Тишину (Generate –Silence), указываем время с секундах. И у нас появляется отрезок с тишиной прямо в середине, которые мы и будем «окрашивать».
Загружаем на нужный нам сайт. Выбираем Inpaint или Replace. Выделяем нужный нам сегмент так, чтобы он захватывал музыку и до и после. Прописываем слова. Указываем нужный нам стиль. Смотрим на полученный результат.
Важный момент. В Udio вроде всё понятно. Там отрывок 32 сек. И туда мы вставляем слова нового куплета.
В Riffusion мы оставляем слова всей песни, и вставляем где необходимо новые. В Sonauto тоже, слова, которые были, остаются, а новые вставляем между ними.
Выбираем подходящее место «с запасом» для окрашивания. Пункт Генерировать – Тишину (Generate –Silence), указываем время с секундах. И у нас появляется отрезок с тишиной прямо в середине, которые мы и будем «окрашивать».
Загружаем на нужный нам сайт. Выбираем Inpaint или Replace. Выделяем нужный нам сегмент так, чтобы он захватывал музыку и до и после. Прописываем слова. Указываем нужный нам стиль. Смотрим на полученный результат.
Важный момент. В Udio вроде всё понятно. Там отрывок 32 сек. И туда мы вставляем слова нового куплета.
В Riffusion мы оставляем слова всей песни, и вставляем где необходимо новые. В Sonauto тоже, слова, которые были, остаются, а новые вставляем между ними.
ТО Boris
👍
4
23:43
И лайфхаки дня.
1) Если песня довольно длинная, то в Udio бывает проблематично выбрать вручную точный отрезок в функции Обрезать и Расширить (Crop and Extend). В этом случае может помочь, как ни странно, режим для людей с нарушением зрения (находится в настройках Preferences > Accessibility > Accessibility Mode).
Включив эту функцию, вы можете точно выставить время обрезки, вплоть до десятых долей секунды. Иногда это помогает после нескольких неудачных попыток в стандартном режиме.
2) Если темп (BPM) известен и стабилен, легко вычислить точный временной интервал: одна четверть (1/4) = 60/BPM, т.е. 0,5 сек. при BPM = 120. Тогда, если темп 124, размер 4/4, а в куплете 8 тактов, его длительность: 8*4*(60/124) = 15,483 сек.
#лайфхак
1) Если песня довольно длинная, то в Udio бывает проблематично выбрать вручную точный отрезок в функции Обрезать и Расширить (Crop and Extend). В этом случае может помочь, как ни странно, режим для людей с нарушением зрения (находится в настройках Preferences > Accessibility > Accessibility Mode).
Включив эту функцию, вы можете точно выставить время обрезки, вплоть до десятых долей секунды. Иногда это помогает после нескольких неудачных попыток в стандартном режиме.
2) Если темп (BPM) известен и стабилен, легко вычислить точный временной интервал: одна четверть (1/4) = 60/BPM, т.е. 0,5 сек. при BPM = 120. Тогда, если темп 124, размер 4/4, а в куплете 8 тактов, его длительность: 8*4*(60/124) = 15,483 сек.
#лайфхак
ТО Boris
🔥
6
👍
3
AH
00:13
Еще раз о жанрах / стилях
... Какие бывают виды музыкальных радиостанций? Наверное, 7-8. Пусть Pop, Pock, Классика, Электронная, Джаз, Блюз, Народная. Конечно больше, но вроде любую др. музыку можно отнести к одной из этих. Heavy Metal > Rock, шансон > Pop...
... распознавание и классификация звуковых, визуальных (и др.) объектов - постоянный и почти мгновенный процесс, если объект "вписывается" в систему. Напротив, не укладывающееся в привычную схему явление, вызывает беспокойство. Скажем, возгорание электропроводки (негативное событие), меня меньше встревожит, чем голубь, который влетит в комнату сквозь оконное стекло, не разбив его... Обезьяно-человек в холле ТЦ, напугает народ больше, чем обезьяна...
Где-то, кажется у Т.В. Черниговской или С.В. Савельева, попадалось утверждение, что организация нейронов приводит к разделению множества объектов на 7+/-2, т.е. 5-9 групп. Видимо это оптимально для выживания в природе. Слышал об этом давно и всегда вспоминал, когда делал классификацию чего-то.
👍
6
🔥
1
... Какие бывают виды музыкальных радиостанций? Наверное, 7-8. Пусть Pop, Pock, Классика, Электронная, Джаз, Блюз, Народная. Конечно больше, но вроде любую др. музыку можно отнести к одной из этих. Heavy Metal > Rock, шансон > Pop...
... распознавание и классификация звуковых, визуальных (и др.) объектов - постоянный и почти мгновенный процесс, если объект "вписывается" в систему. Напротив, не укладывающееся в привычную схему явление, вызывает беспокойство. Скажем, возгорание электропроводки (негативное событие), меня меньше встревожит, чем голубь, который влетит в комнату сквозь оконное стекло, не разбив его... Обезьяно-человек в холле ТЦ, напугает народ больше, чем обезьяна...
Где-то, кажется у Т.В. Черниговской или С.В. Савельева, попадалось утверждение, что организация нейронов приводит к разделению множества объектов на 7+/-2, т.е. 5-9 групп. Видимо это оптимально для выживания в природе. Слышал об этом давно и всегда вспоминал, когда делал классификацию чего-то.
00:16
Честно говоря, меня, как наверное многих, напрягает множество жанров/ стилей, даже несмотря, что они - только часть из 3-4 тыс. тегов. Исторически их количество, мне кажется, связано с двумя причинами:
а) литературный стиль в описании композиций (впрочем, и музыковедческий к нему близок).
б) требование рынка - маркетинг.
Уверен почти на 100%:
-- нет людей, которые разбираются сразу во всех стилях,
-- два специалиста в одном стиле вряд ли всегда сходятся в классификации одной песни в под-стиле.
Из Wiki - "... генеалогические древа музыкальных жанров показывают, как новые жанры возникли из существующих жанров и как несколько жанров внесли свой вклад в новый жанр. Поскольку музыку можно бесконечно разбивать на все меньшие и меньшие категории, генеалогическая диаграмма обычно фокусируется на одном основном жанре..."
👍
5
🔥
3
а) литературный стиль в описании композиций (впрочем, и музыковедческий к нему близок).
б) требование рынка - маркетинг.
Уверен почти на 100%:
-- нет людей, которые разбираются сразу во всех стилях,
-- два специалиста в одном стиле вряд ли всегда сходятся в классификации одной песни в под-стиле.
Из Wiki - "... генеалогические древа музыкальных жанров показывают, как новые жанры возникли из существующих жанров и как несколько жанров внесли свой вклад в новый жанр. Поскольку музыку можно бесконечно разбивать на все меньшие и меньшие категории, генеалогическая диаграмма обычно фокусируется на одном основном жанре..."
AH
21:09
Несвязность генерации и удвоение голоса
В посте от 20 января, разбирая примерное устройство Suno, Udio и др., я отмечал среди "болезней" несвязность генерации - система порой "плохо помнит", что было ранее в этой же песне.
По этой причине, 2-й, 3-й куплеты (припевы) могут мелодически и ритмически отличаться от 1-го. Иногда очень заметно. Конечно, в реальной композиции такое отнесут к развитию, авторскому прочтению. Но в песнях от человека таких диких вольностей, как у ИИ, обычно нет. В современной популярной музыке мы привыкли слышать, как правило, строгое повторение мелодии и ритма. Особенно в припеве. Ведь это то, что авторы стараются сделать максимально запоминающимся, чтобы "цепляло" (Catchy tune), чтобы можно было легко подпевать.
"Нет худа без добра", "минусы в плюсы" и т.п. - точно? Да! ... Я делал одно из 3-х:
-- выбирал лучший припев и заменял остальные (Split, Copy, Paste);
-- дублировал голос в припеве (2-й голос, октава, унисон);
-- собирал группу: 3 припева в один + еще 3 с PitchShift/ Pan.
👍
4
В посте от 20 января, разбирая примерное устройство Suno, Udio и др., я отмечал среди "болезней" несвязность генерации - система порой "плохо помнит", что было ранее в этой же песне.
По этой причине, 2-й, 3-й куплеты (припевы) могут мелодически и ритмически отличаться от 1-го. Иногда очень заметно. Конечно, в реальной композиции такое отнесут к развитию, авторскому прочтению. Но в песнях от человека таких диких вольностей, как у ИИ, обычно нет. В современной популярной музыке мы привыкли слышать, как правило, строгое повторение мелодии и ритма. Особенно в припеве. Ведь это то, что авторы стараются сделать максимально запоминающимся, чтобы "цепляло" (Catchy tune), чтобы можно было легко подпевать.
"Нет худа без добра", "минусы в плюсы" и т.п. - точно? Да! ... Я делал одно из 3-х:
-- выбирал лучший припев и заменял остальные (Split, Copy, Paste);
-- дублировал голос в припеве (2-й голос, октава, унисон);
-- собирал группу: 3 припева в один + еще 3 с PitchShift/ Pan.
AH
02:03
Дубль вокала в Udio
Всем привет. На связи Борис. И сегодня мы будем дублировать понравившийся вокал в Udio.
В ходе генерации мелодий и новых голосов бывает можно встретить интересный вокал, обладающий собственными чертами. И конечно, сразу хочется создать и другие композиции с этим вокалом. Поэтому я вам предлагаю метод, который можно использовать в Udio.
Я, к сожалению, не нашел рабочего способа в Riffusion как можно добиться такого же эффекта. Их новая функция Vibes (где можно сохранить короткие 10sec «вайбы» и затем повторно использовать при создании новой песни) довольно хороша и отлично подходит для создания нужного стиля или определенной музыкальной характеристики. Но для голоса у меня нет готового рецепта с функцией Vibes пока. Все звучит близко, но потом уходит в сторону. Может у вас есть хороший способ 😕.
Всем привет. На связи Борис. И сегодня мы будем дублировать понравившийся вокал в Udio.
В ходе генерации мелодий и новых голосов бывает можно встретить интересный вокал, обладающий собственными чертами. И конечно, сразу хочется создать и другие композиции с этим вокалом. Поэтому я вам предлагаю метод, который можно использовать в Udio.
Я, к сожалению, не нашел рабочего способа в Riffusion как можно добиться такого же эффекта. Их новая функция Vibes (где можно сохранить короткие 10sec «вайбы» и затем повторно использовать при создании новой песни) довольно хороша и отлично подходит для создания нужного стиля или определенной музыкальной характеристики. Но для голоса у меня нет готового рецепта с функцией Vibes пока. Все звучит близко, но потом уходит в сторону. Может у вас есть хороший способ 😕.
ТО Boris
02:07
Несколько важных моментов.
При создании а капеллы часто возникают проблемы с интонацией, ударением и пр. - на это не обращаю внимание - интересует тембр и особенности вокала. Часто использую первые подвернувшиеся стихи, но заметил, что на стихи С.Есенина получается лучше 👌
... Удалось сделать хороший вариант с живым голосом (похоже на RVC). Каждый человек обладает отличительным тембром, диапазоном, манерой. Пробовал сделать таким образом голос знакомой (профессиональной певицы). Но она ясно сказала, что тембр тот же, но манера не похожа*. Со своим голосом не готов пока показать результаты, хотя работаю над этим. Возможно у вас получится лучше. 😊
* объяснение этого момента есть у Алексея.
При создании «виртуального исполнителя» 2-3 песни не дадут полной картины, нужно собрать целый «альбом». Тогда голос станет четко узнаваемым, будет понятно, какие особые черты он имеет.
При создании а капеллы часто возникают проблемы с интонацией, ударением и пр. - на это не обращаю внимание - интересует тембр и особенности вокала. Часто использую первые подвернувшиеся стихи, но заметил, что на стихи С.Есенина получается лучше 👌
... Удалось сделать хороший вариант с живым голосом (похоже на RVC). Каждый человек обладает отличительным тембром, диапазоном, манерой. Пробовал сделать таким образом голос знакомой (профессиональной певицы). Но она ясно сказала, что тембр тот же, но манера не похожа*. Со своим голосом не готов пока показать результаты, хотя работаю над этим. Возможно у вас получится лучше. 😊
* объяснение этого момента есть у Алексея.
При создании «виртуального исполнителя» 2-3 песни не дадут полной картины, нужно собрать целый «альбом». Тогда голос станет четко узнаваемым, будет понятно, какие особые черты он имеет.
ТО Boris
👍
2
AH
23:45
RVC: kits, weights или ... ?
Полгода назад я собрал голосовую модель для товарища, поющего только на русском. Сделал 2 англ. песни "с его вокалом" - он выложил без комментария и ... получил хорошие отзывы. Тут его знакомая, предложила ему спеть дуэтом, полагая, что он поет на англ. .. Упс! ... он не смог сам сделать замену тембра (RVC) на kits-ai и обратился ко мне.
ОК, иду на kits.ai, где у самого несколько моделей - печалька. До этого они отменили скачку результата (кавера) на бесплатном акк., а теперь и свои модели подгружать нельзя. Но осталась возможность делать преобразования с их моделями - у них хорошие как выбор, так и качество (см. ниже).
Ладно, иду на weights.gg - там все бесплатно (Борис обычно добавляет пока 😕), вроде есть какие-то лимиты, но я ни разу с этим еще не сталкивался.
Раз уж снова в RVC, я подготовил инструкцию, как собрать голосовой DS и создать модель. Вроде ранее уже писал, но тут о weights.
Также сделал несколько примеров для пояснения главных моментов с RVC.
👍
3
Полгода назад я собрал голосовую модель для товарища, поющего только на русском. Сделал 2 англ. песни "с его вокалом" - он выложил без комментария и ... получил хорошие отзывы. Тут его знакомая, предложила ему спеть дуэтом, полагая, что он поет на англ. .. Упс! ... он не смог сам сделать замену тембра (RVC) на kits-ai и обратился ко мне.
ОК, иду на kits.ai, где у самого несколько моделей - печалька. До этого они отменили скачку результата (кавера) на бесплатном акк., а теперь и свои модели подгружать нельзя. Но осталась возможность делать преобразования с их моделями - у них хорошие как выбор, так и качество (см. ниже).
Ладно, иду на weights.gg - там все бесплатно (Борис обычно добавляет пока 😕), вроде есть какие-то лимиты, но я ни разу с этим еще не сталкивался.
Раз уж снова в RVC, я подготовил инструкцию, как собрать голосовой DS и создать модель. Вроде ранее уже писал, но тут о weights.
Также сделал несколько примеров для пояснения главных моментов с RVC.
23:52
Во 2-м примере моя модель на DS из чистого вокала и речи (Ru, En). Но есть огрехи, т.к. исходный трек получен с помощью Split из ИИ генерации. Особенно в припеве, где есть подпевки, а многоголосие усложняет определение тона (Pitch), что критично для RVC преобразования.
4-9-й примеры сделал в kits-ai с их моделями (три - Ж, три - М) - названия указаны. Модели мне представляются качественными (и multi-language*), т.к. не выдают ошибки в произношении даже на моем развязном примере.
* Модели, созданные на DS исключительно из английского пения и речи, обычно выдают результат с явным акцентом. Лучше выбирать итальянские/ испанские модели, т.к. эти языки ближе по фонетике к русскому.
Эти примеры ясно показывают, что интонация, манера сохраняется. Более того, несмотря на то, что звуковые волны отличаются (например, на отметках а и b) - интонирование (кривая Pitch) одинаковое. По этой причине, сложение 6-ти (!) треков с разными тембрами не создает хор - все участники абсолютно синхронны - пример 10.
👍
10
4-9-й примеры сделал в kits-ai с их моделями (три - Ж, три - М) - названия указаны. Модели мне представляются качественными (и multi-language*), т.к. не выдают ошибки в произношении даже на моем развязном примере.
* Модели, созданные на DS исключительно из английского пения и речи, обычно выдают результат с явным акцентом. Лучше выбирать итальянские/ испанские модели, т.к. эти языки ближе по фонетике к русскому.
Эти примеры ясно показывают, что интонация, манера сохраняется. Более того, несмотря на то, что звуковые волны отличаются (например, на отметках а и b) - интонирование (кривая Pitch) одинаковое. По этой причине, сложение 6-ти (!) треков с разными тембрами не создает хор - все участники абсолютно синхронны - пример 10.
AH
23:51
Suno, Standup, Vocaloid
Удивительные времена: оживил фото студенческой рок-группы (~1980), продолжил соло нашего гитариста, кот. уже нет в этом мире. Наверное, можно было бы и клип собрать (кот. у нас никогда не было) - чуть больше материала, + платный аккаунт на Hedra и т.п. Да, прошлое порой неожиданным образом проявляется в настоящем.
Недавно МакКинли прислал генерацию в Suno стендапа (я и не знал, что такое есть) об истории Big Al* - невышедшего банка Vocaloid.
* Я работал с его бета-версией лет 20 назад. Задачи - повышение выразительности. Одна, как ни странно, - петь "мимо нот", получить речитатив. Другая - петь на русском. И то, и др., Yamaha, как бы по умолчанию не предусматривала.
Синтез речи, пусть и с "театральной интонацией", на мой взгляд более простая задача, чем генерация вокального трека. Здесь 90% определяется текстом. Подмешать шум аудитории? ... вообще ни о чём.
... А уникальный голос Big Al теперь получает вторую жизнь благодаря усилиям МакКинли и таким технологиям, как RVC.
👍
8
Удивительные времена: оживил фото студенческой рок-группы (~1980), продолжил соло нашего гитариста, кот. уже нет в этом мире. Наверное, можно было бы и клип собрать (кот. у нас никогда не было) - чуть больше материала, + платный аккаунт на Hedra и т.п. Да, прошлое порой неожиданным образом проявляется в настоящем.
Недавно МакКинли прислал генерацию в Suno стендапа (я и не знал, что такое есть) об истории Big Al* - невышедшего банка Vocaloid.
* Я работал с его бета-версией лет 20 назад. Задачи - повышение выразительности. Одна, как ни странно, - петь "мимо нот", получить речитатив. Другая - петь на русском. И то, и др., Yamaha, как бы по умолчанию не предусматривала.
Синтез речи, пусть и с "театральной интонацией", на мой взгляд более простая задача, чем генерация вокального трека. Здесь 90% определяется текстом. Подмешать шум аудитории? ... вообще ни о чём.
... А уникальный голос Big Al теперь получает вторую жизнь благодаря усилиям МакКинли и таким технологиям, как RVC.
AH
06:01
С праздником, с великой победой!
Понимаю, все сложно и не для всех однозначно. Особенно, после того, как нас 30 лет отучали любить свою страну. Везде неидеально. Был в Швейцарии, Германии, Франции, Италии, Нидерландах, США, Канаде, Турции, ОАЭ, Южной Корее, Вьетнаме, Таиланде, на Мальдивах ... до 91 г. - почти во всех республиках СССР, учился в Минском ВИЗРУ ПВО.
...В 2006 на Frankfurt Musik Messe в присутствие партнера, индуса из США, говорил с владельцем английской фирмы. Наша разработка, со слов немцев и шведов, опережала английскую на 5-6 лет... Думал о сотрудничестве, наивный... Только после поездки, вспоминая его надменное лицо, я "догнал": индус для англичанина - раб, даже если образованнее и в 100 раз богаче, а инженер из России - враг, даже если занят той же темой... Конечно, не все такие.
Фашизм, на мой взгляд, начинается с одной вещи - внушения себе, своему народу, что вы выше/ лучше других от рождения. Действительно, как все просто - можно ничего не достигать, зачем? И ценность чужой жизни = 0.
❤
16
👍
2
Понимаю, все сложно и не для всех однозначно. Особенно, после того, как нас 30 лет отучали любить свою страну. Везде неидеально. Был в Швейцарии, Германии, Франции, Италии, Нидерландах, США, Канаде, Турции, ОАЭ, Южной Корее, Вьетнаме, Таиланде, на Мальдивах ... до 91 г. - почти во всех республиках СССР, учился в Минском ВИЗРУ ПВО.
...В 2006 на Frankfurt Musik Messe в присутствие партнера, индуса из США, говорил с владельцем английской фирмы. Наша разработка, со слов немцев и шведов, опережала английскую на 5-6 лет... Думал о сотрудничестве, наивный... Только после поездки, вспоминая его надменное лицо, я "догнал": индус для англичанина - раб, даже если образованнее и в 100 раз богаче, а инженер из России - враг, даже если занят той же темой... Конечно, не все такие.
Фашизм, на мой взгляд, начинается с одной вещи - внушения себе, своему народу, что вы выше/ лучше других от рождения. Действительно, как все просто - можно ничего не достигать, зачем? И ценность чужой жизни = 0.
AH
02:22
Цифровые отпечатки
Привет, сегодня несколько новостей из мира музыкального ИИ.
Udio заявила, что интегрирует технологию аудиоотпечатков и идентификации контента Audible Magic непосредственно в свою платформу. Audible Magic - сервис, который предоставляет услуги идентификации контента социальным сетям, звукозаписывающим лейблам и т.д.
Это означает, что Audible Magic создаст реестр отпечатков произведений в момент создания музыкального трека. Когда пользователи создают музыку с Udio, каждый трек будет автоматически зарегистрирован в системе, создавая отпечаток, который следует по всей цифровой цепочке.
Любая платформа, а в первую очередь это, конечно, YouTube, Shazam, Spotify, Apple Music, да и любой крупный стриминговый сервис, будет видеть кто и когда создал конкретный трек. Решение, возможно, спорное и как это будет реализовано точно неизвестно. Разработчики уверяют, что это будет внедрено в течение следующих нескольких месяцев и об этом будет заявлено.
Привет, сегодня несколько новостей из мира музыкального ИИ.
Udio заявила, что интегрирует технологию аудиоотпечатков и идентификации контента Audible Magic непосредственно в свою платформу. Audible Magic - сервис, который предоставляет услуги идентификации контента социальным сетям, звукозаписывающим лейблам и т.д.
Это означает, что Audible Magic создаст реестр отпечатков произведений в момент создания музыкального трека. Когда пользователи создают музыку с Udio, каждый трек будет автоматически зарегистрирован в системе, создавая отпечаток, который следует по всей цифровой цепочке.
Любая платформа, а в первую очередь это, конечно, YouTube, Shazam, Spotify, Apple Music, да и любой крупный стриминговый сервис, будет видеть кто и когда создал конкретный трек. Решение, возможно, спорное и как это будет реализовано точно неизвестно. Разработчики уверяют, что это будет внедрено в течение следующих нескольких месяцев и об этом будет заявлено.
ТО Boris
🤔
3
🔥
2
👏
1
02:24
Submithub.com AI song checker
Но и без внедрения цифрового отпечатка можно довольно достоверно узнать кто создатель музыкальной композиция - ИИ или человек.
Например, сервис Submithub позволяет с довольно высокой точностью определить, как был создан трек.
Эта модель преобразует аудиофайлы в спектрограммы (визуальные представления звука, которые показывают частоту и интенсивность с течением времени), а затем анализирует с помощью методов компьютерного зрения, чтобы определить, был звук создан ИИ или людьми. Можно загрузить собственный файл или отправить ссылку с YouTube / Spotify.
Я попробовал много различных вариантов созданных на разных ИИ - он определяет довольно точно. Особенно композиции c вокалом. Интересно, что «человеческие» каверы, измененные с помощью ИИ, сервис точно не определяет, а также чисто инструментальные композиции. Кроме этого, сервис еще не обучен на датасете новой версии Suno 4.5.
Также на этом сайте есть довольно интересный сервис, который поможет помочь определить жанр песни.
Но и без внедрения цифрового отпечатка можно довольно достоверно узнать кто создатель музыкальной композиция - ИИ или человек.
Например, сервис Submithub позволяет с довольно высокой точностью определить, как был создан трек.
Эта модель преобразует аудиофайлы в спектрограммы (визуальные представления звука, которые показывают частоту и интенсивность с течением времени), а затем анализирует с помощью методов компьютерного зрения, чтобы определить, был звук создан ИИ или людьми. Можно загрузить собственный файл или отправить ссылку с YouTube / Spotify.
Я попробовал много различных вариантов созданных на разных ИИ - он определяет довольно точно. Особенно композиции c вокалом. Интересно, что «человеческие» каверы, измененные с помощью ИИ, сервис точно не определяет, а также чисто инструментальные композиции. Кроме этого, сервис еще не обучен на датасете новой версии Suno 4.5.
Также на этом сайте есть довольно интересный сервис, который поможет помочь определить жанр песни.
ТО Boris
🔥
3
02:29
Оплата сервисов из России
В текущее время довольно остро стоит вопрос оплаты зарубежных сервисов из России. До февраля пользовался сервисом Delims, но он больше не работает.
Также пользовался сервисом через телеграм @WantToPayBot. Довольно удобно - можно создать виртуальную карту, как предоплаченную Prepaid, для оплаты сервисов, так и пополняемую Visa Easy или даже Visa Pro. Всё просто и прозрачно, но ценник, конечно, дорогой.
Буквально несколько дней назад для того, чтобы попробовать новую версию Suno 4.5 по наводке Алексея воспользовался сервисом "Плати легко" через телеграм @paysaas. Тут нет выпуска карты, общение происходит через оператора, оплата через СБП. После оплаты мне предложили реквизиты карты и адрес. 10 долларов обошлись в 1160 руб (брал без страховки). В текущих реалиях считаю это вполне вменяемый ценник.
Это не реклама, никаких реф. ссылок я не даю. Исключительно личный опыт с сервисами, которыми пользовался. Уверен многим эта информация будет полезна.
В текущее время довольно остро стоит вопрос оплаты зарубежных сервисов из России. До февраля пользовался сервисом Delims, но он больше не работает.
Также пользовался сервисом через телеграм @WantToPayBot. Довольно удобно - можно создать виртуальную карту, как предоплаченную Prepaid, для оплаты сервисов, так и пополняемую Visa Easy или даже Visa Pro. Всё просто и прозрачно, но ценник, конечно, дорогой.
Буквально несколько дней назад для того, чтобы попробовать новую версию Suno 4.5 по наводке Алексея воспользовался сервисом "Плати легко" через телеграм @paysaas. Тут нет выпуска карты, общение происходит через оператора, оплата через СБП. После оплаты мне предложили реквизиты карты и адрес. 10 долларов обошлись в 1160 руб (брал без страховки). В текущих реалиях считаю это вполне вменяемый ценник.
Это не реклама, никаких реф. ссылок я не даю. Исключительно личный опыт с сервисами, которыми пользовался. Уверен многим эта информация будет полезна.
ТО Boris
👍
10
👏
1
02:31
И лайфхак дня.
В новой версии Suno 4.5 справа сверху в поле Описания стиля появилась кнопка Creative Boost, что по сути является Масштабированием запроса, как у сервисов генерации изображений.
Например, при вводе "
Но кроме этого, туда можно ввести название определенной группы или имя исполнителя. Например, Nirvana или Madonna и Creative Boost преобразует в описание, подходящее по стилю.
Но почему-то туда пока завезли не всех крупных исполнителей. Например, на Metallica или Ella Fitzgerald, кнопка не реагирует.
В начало поста ⬆️
#лайфхак
В новой версии Suno 4.5 справа сверху в поле Описания стиля появилась кнопка Creative Boost, что по сути является Масштабированием запроса, как у сервисов генерации изображений.
Например, при вводе "
Blues, blues rock, female vocal, melodic, raw" и при использовании этой функции, система выдаст более креативное описание вроде "Blues rock track with raw female vocals, opening with expressive electric guitar riffs and steady drum groove. Basslines lock in with drums for a driving feel. Verses feature moody guitar licks; choruses swell with melodic lead lines. Bridge introduces a soulful guitar solo, closing with intensity".Но кроме этого, туда можно ввести название определенной группы или имя исполнителя. Например, Nirvana или Madonna и Creative Boost преобразует в описание, подходящее по стилю.
Но почему-то туда пока завезли не всех крупных исполнителей. Например, на Metallica или Ella Fitzgerald, кнопка не реагирует.
В начало поста ⬆️
#лайфхак
ТО Boris
👍
13
AH
23:39
Чувство ритма и Абсолютный слух
Каждый шаг в развитии научно-технического прогресса дает миллионам новые возможности выражения. Музыка - не исключение. Когда-то давно исполнитель сам делал себе инструмент - духовой, струнный, перкуссионный. Позже инструмент делал мастер, а музыкант овладевал приемами игры... В середине прошлого века появляются ЭМИ, в 80-х - синтезаторы с авто аккомпанементом - можно "пяткой левой ноги" нажать на клавишу и заиграет музыка!.. Теперь все в телефоне.
Где предел прогрессу? Наверное вот: "... просыпаюсь, мысленно командую Play - из колонок (или прямо в мозг) звучит новая песня моего любимого артиста (или моя)"... К слову, в 2019-м ко мне обращалась фирма (Беларусь/ Польша) на предмет генерации музыки на основе сигналов головного мозга (ч/з нейро интерфейс). А может уже все сделано?
Если честно, меня радует, что многие начинают не только генерить с ИИ, но и сами учиться. Кто-то начал петь, кто-то купил гитару/ синтезатор... ОК, тут 2 момента: музыкальный слух и чувство ритма.
👍
3
❤
1
Каждый шаг в развитии научно-технического прогресса дает миллионам новые возможности выражения. Музыка - не исключение. Когда-то давно исполнитель сам делал себе инструмент - духовой, струнный, перкуссионный. Позже инструмент делал мастер, а музыкант овладевал приемами игры... В середине прошлого века появляются ЭМИ, в 80-х - синтезаторы с авто аккомпанементом - можно "пяткой левой ноги" нажать на клавишу и заиграет музыка!.. Теперь все в телефоне.
Где предел прогрессу? Наверное вот: "... просыпаюсь, мысленно командую Play - из колонок (или прямо в мозг) звучит новая песня моего любимого артиста (или моя)"... К слову, в 2019-м ко мне обращалась фирма (Беларусь/ Польша) на предмет генерации музыки на основе сигналов головного мозга (ч/з нейро интерфейс). А может уже все сделано?
Если честно, меня радует, что многие начинают не только генерить с ИИ, но и сами учиться. Кто-то начал петь, кто-то купил гитару/ синтезатор... ОК, тут 2 момента: музыкальный слух и чувство ритма.
AH
00:00
SPA*: Новая версия 1.4
* Song Prompt Assistant
Уфф ... учел замечания, многое что добавил:
1. Параметры Prompt и Template можно задавать независимо.
2. Порядок параметров можно менять.
3. Есть сохранение/ загрузка Пресета.
4. Prompt и Template можно сохранять в *.txt.
5. В тегах Song Structure есть авто-заполнение.
6. Основные теги выделены цветом.
7. В параметр Performer добавлена группа Theme (к/ф).
При этом, так и просится на язык фраза: "... работа проделана большая и бесполезная" (почти) 😢. Потому, что:
а) для разных ИИ систем нужны разные задания;
б) сервисы постоянно обновляются;
в) по-хорошему, в приложение надо собственно и ИИ интегрировать.
Т.ч. не факт, что ч/з полгода все это не устареет.
Ну, ... ладно, зато немного отвлекся на что-то для души. Надеюсь, кому-то SPA будет полезен как тренажер/ "справочник", где многое собрано в одном месте.
Ссылка на SPA v1.4
SPA v1.4 Help
Пост с предыдущей версией с более подробным пояснением идеи приложения.
👍
5
🔥
5
* Song Prompt Assistant
Уфф ... учел замечания, многое что добавил:
1. Параметры Prompt и Template можно задавать независимо.
2. Порядок параметров можно менять.
3. Есть сохранение/ загрузка Пресета.
4. Prompt и Template можно сохранять в *.txt.
5. В тегах Song Structure есть авто-заполнение.
6. Основные теги выделены цветом.
7. В параметр Performer добавлена группа Theme (к/ф).
При этом, так и просится на язык фраза: "... работа проделана большая и бесполезная" (почти) 😢. Потому, что:
а) для разных ИИ систем нужны разные задания;
б) сервисы постоянно обновляются;
в) по-хорошему, в приложение надо собственно и ИИ интегрировать.
Т.ч. не факт, что ч/з полгода все это не устареет.
Ну, ... ладно, зато немного отвлекся на что-то для души. Надеюсь, кому-то SPA будет полезен как тренажер/ "справочник", где многое собрано в одном месте.
Ссылка на SPA v1.4
SPA v1.4 Help
Пост с предыдущей версией с более подробным пояснением идеи приложения.
AH
00:16
Знаменитости в Suno ("с бубном")
Что-то подобное я уже пробовал, но в этот раз более подробное исследование. Все на основе DS (полный, вокальный). Напомню - Suno не пропускает DS, если распознает в нем известный текст или мелодию. Способ преодоления этого ограничения уже пояснял... Также отмечал - в Sonauto есть генерация популярных артистов, прямо по указанию имени в Style. Т.е. в Sonauto можно сгенерить DS, который примет Suno, - голос, манера будет певца, но мелодия/ текст в базе отсутствуют.
Моя схема:
1. Пишу промпт для генерации текста, типа: "Я молодая, красивая девушка, скучаю на пляже...".
2. Перевожу в Google Translate на En, Ital, Spanish...
3. В Suno генерю текст (на языке певца).
4. В Sonauto генерю песни (важно адекватно задать Style - близко к исполнителю).
5. Выбираю удачный трек и собираю DS.
6. Загружаю DS в Suno.
7. Генерю на русском (или др.).
О нюансах писал ранее. Лучше до этой схемы еще раз ознакомиться с постами о полном и вокальном DS.
Каждая новая копия хуже оригинала? Да! 😢
👍
6
Что-то подобное я уже пробовал, но в этот раз более подробное исследование. Все на основе DS (полный, вокальный). Напомню - Suno не пропускает DS, если распознает в нем известный текст или мелодию. Способ преодоления этого ограничения уже пояснял... Также отмечал - в Sonauto есть генерация популярных артистов, прямо по указанию имени в Style. Т.е. в Sonauto можно сгенерить DS, который примет Suno, - голос, манера будет певца, но мелодия/ текст в базе отсутствуют.
Моя схема:
1. Пишу промпт для генерации текста, типа: "Я молодая, красивая девушка, скучаю на пляже...".
2. Перевожу в Google Translate на En, Ital, Spanish...
3. В Suno генерю текст (на языке певца).
4. В Sonauto генерю песни (важно адекватно задать Style - близко к исполнителю).
5. Выбираю удачный трек и собираю DS.
6. Загружаю DS в Suno.
7. Генерю на русском (или др.).
О нюансах писал ранее. Лучше до этой схемы еще раз ознакомиться с постами о полном и вокальном DS.
Каждая новая копия хуже оригинала? Да! 😢
AH
21:28
Sonauto: имя артиста или стиль?
Продолжение предыдущего поста в некотором смысле. Хотел сгенерить «новую» песню Стинга, вроде Mad About You, Fragile, Shape of my head, Fields of Gold. Но Sonauto выдавал что-то явно джазовое. Да, я знаю, что Стинг им занимался, да и в популярных треках у него почти всегда jazzy... Ничего с поп-ритмом не получилось, несмотря на указания в Style - или имя артиста доминирует, или так для Стинга разработчики собрали набор треков для обучения ИИ.
В общем, решил проверить этот момент на отличающихся артистах (George Benson, Nazareth, Nirvana, Ray Charles, Sting) — задал для всех разные, но одни и те же стили. Сделал 8 промтов (ИМЯ артиста в начале каждого!), здесь привожу генерацию для no style (только имя) и результаты для 4-х.
5 артистов (треков). Для каждого стиля* 2 вар. по 14 сек:
0:00 --- (no style)
0:29 ballad, acoustic
0:57 bossa nova, percussion, acoustic guitar
1:23 hard rock
1:51 pop punk, electric guitar
* помните, что [pop punk] и [pop, punk] — разные стили?
🔥
4
❤
1
Продолжение предыдущего поста в некотором смысле. Хотел сгенерить «новую» песню Стинга, вроде Mad About You, Fragile, Shape of my head, Fields of Gold. Но Sonauto выдавал что-то явно джазовое. Да, я знаю, что Стинг им занимался, да и в популярных треках у него почти всегда jazzy... Ничего с поп-ритмом не получилось, несмотря на указания в Style - или имя артиста доминирует, или так для Стинга разработчики собрали набор треков для обучения ИИ.
В общем, решил проверить этот момент на отличающихся артистах (George Benson, Nazareth, Nirvana, Ray Charles, Sting) — задал для всех разные, но одни и те же стили. Сделал 8 промтов (ИМЯ артиста в начале каждого!), здесь привожу генерацию для no style (только имя) и результаты для 4-х.
5 артистов (треков). Для каждого стиля* 2 вар. по 14 сек:
0:00 --- (no style)
0:29 ballad, acoustic
0:57 bossa nova, percussion, acoustic guitar
1:23 hard rock
1:51 pop punk, electric guitar
* помните, что [pop punk] и [pop, punk] — разные стили?
AH
20:51
Теория слуха (… и ИИ)
Сейчас, проектируя новый гаджет, часть электронщиков используют готовые модули и могут не помнить закон Ома... Музыканту не требуется знание акустики и психологии восприятия, пока он не задастся целью разобраться почему именно так устроена скрипка или флейта... И не странно, что большинство выпускников консерватории не могут ответить, например, на такие вопросы (это не наука, это элементарные вещи!):
1. Пианист определит инструмент, если записать ОДНУ ноту на рояле и воспроизвести аудио "задом наперёд" (reverse)?
2. В чем примечательность частоты 16 Гц для всей музыки в целом?
3. Из-за каких особенностей секунда (например, C и C#) звучит неприятно, а квинта (например, D и A) – приятно (консонанс / диссонанс)?
Я не предполагал, что опыты с муз. ИИ вернут меня к психоакустике и теории слуха. Задумался об этом почти год назад (см. P.S. к статье), а теперь уверен, что ИИ радикально изменит прежние представления.
👍
2
🔥
1
Сейчас, проектируя новый гаджет, часть электронщиков используют готовые модули и могут не помнить закон Ома... Музыканту не требуется знание акустики и психологии восприятия, пока он не задастся целью разобраться почему именно так устроена скрипка или флейта... И не странно, что большинство выпускников консерватории не могут ответить, например, на такие вопросы (это не наука, это элементарные вещи!):
1. Пианист определит инструмент, если записать ОДНУ ноту на рояле и воспроизвести аудио "задом наперёд" (reverse)?
2. В чем примечательность частоты 16 Гц для всей музыки в целом?
3. Из-за каких особенностей секунда (например, C и C#) звучит неприятно, а квинта (например, D и A) – приятно (консонанс / диссонанс)?
Я не предполагал, что опыты с муз. ИИ вернут меня к психоакустике и теории слуха. Задумался об этом почти год назад (см. P.S. к статье), а теперь уверен, что ИИ радикально изменит прежние представления.
AH
22:57
Riffusion: от наброска к ...
Улучшение ИИ исходной фонограммы было бы очень полезным для многих, и любителей, и профи. Как с домом - свой эскиз отдаем архитектору, он с инж.- проектировщиком, строителями обновляет старый объект - все грамотно, но идея наша 😄.
На днях решил вернуться к Swap Vocal/ Sound в Riffusion - как сейчас может работать такая схема ? :
1. Спеть песню под примитивный аккомпанемент.
2. Сделать Swap Vocal (SV), т.е. задать Style и изменить голос.
3. Взять результат п.2. и сделать Swap Sound (SS), т.е. задать Style аккомпанементу и поменять его... Все новое - "вуаля" или не?
Взял текст "Девочки" (CD, "Место под солнцем", Vocaloid/ Leon, 2006), сочинил др. мелодию, забил простой минус в OnyxArranger 2.1, записал в GM на Yamaha MU100R, спел (вокал не тьюнил). Это как бы DS в полную длину песни (черновик).
п.2. прошел дважды - [Male ... emotional] и [Male ... hoarse], + для каждого вокала по 2 вар. Style Sound *.
* вся песня, чтобы показать работу стилей.
👍
3
👏
3
❤
1
Улучшение ИИ исходной фонограммы было бы очень полезным для многих, и любителей, и профи. Как с домом - свой эскиз отдаем архитектору, он с инж.- проектировщиком, строителями обновляет старый объект - все грамотно, но идея наша 😄.
На днях решил вернуться к Swap Vocal/ Sound в Riffusion - как сейчас может работать такая схема ? :
1. Спеть песню под примитивный аккомпанемент.
2. Сделать Swap Vocal (SV), т.е. задать Style и изменить голос.
3. Взять результат п.2. и сделать Swap Sound (SS), т.е. задать Style аккомпанементу и поменять его... Все новое - "вуаля" или не?
Взял текст "Девочки" (CD, "Место под солнцем", Vocaloid/ Leon, 2006), сочинил др. мелодию, забил простой минус в OnyxArranger 2.1, записал в GM на Yamaha MU100R, спел (вокал не тьюнил). Это как бы DS в полную длину песни (черновик).
п.2. прошел дважды - [Male ... emotional] и [Male ... hoarse], + для каждого вокала по 2 вар. Style Sound *.
* вся песня, чтобы показать работу стилей.
AH
22:46
Riffusion: генерация мелодии и гармонизация
Продолжил тесты - а) как при Swap Vocal (SV) новая мелодия следует исходной гармонии, б) насколько хороша гармонизация при Swap Sound (SS)?
Взял свою песню "Идеальный день"*. Там речитатив местами, да и не совсем простая гармония:
Verse: (нач. в C) C7+|F7+|C7+|D#5+| C7+|F7+|C7+|G5+| ... (далее то же в D)
Chorus: C7+|C7+,C#dim,Dm7/C| Bdim|Dm7,C#7,C7+| - дважды
Сделал 2 вар. Swap Vocal (Var. 100%):
1a/b, Style: Male vocals, ironic, music show
2a/b, Style: Male vocals, brutal voice, ironic
Все вокалы в одном примере: 1a,1b,2a,2b (Verse 1,2,3,4)...
Для вокала 2b сделал Swap Sound. (Var. 100%). Style: Funk traditional 1980s, male vocals, emotional singer, distortion guitar solo. Этот вокал резковат, если бы собирал со своим минусом, то сделал бы Split Voc., прибрал 2,5 кГц (нижн. порог певческой форманты) и поднял 450 Гц (грудной резонатор).
* написал в 21 г. после вебинара Lee с тем же названием.
👍
3
Продолжил тесты - а) как при Swap Vocal (SV) новая мелодия следует исходной гармонии, б) насколько хороша гармонизация при Swap Sound (SS)?
Взял свою песню "Идеальный день"*. Там речитатив местами, да и не совсем простая гармония:
Verse: (нач. в C) C7+|F7+|C7+|D#5+| C7+|F7+|C7+|G5+| ... (далее то же в D)
Chorus: C7+|C7+,C#dim,Dm7/C| Bdim|Dm7,C#7,C7+| - дважды
Сделал 2 вар. Swap Vocal (Var. 100%):
1a/b, Style: Male vocals, ironic, music show
2a/b, Style: Male vocals, brutal voice, ironic
Все вокалы в одном примере: 1a,1b,2a,2b (Verse 1,2,3,4)...
Для вокала 2b сделал Swap Sound. (Var. 100%). Style: Funk traditional 1980s, male vocals, emotional singer, distortion guitar solo. Этот вокал резковат, если бы собирал со своим минусом, то сделал бы Split Voc., прибрал 2,5 кГц (нижн. порог певческой форманты) и поднял 450 Гц (грудной резонатор).
* написал в 21 г. после вебинара Lee с тем же названием.
22:56
Выводы:
1. Генерация мелодии правильная на любую гармонию, если она явная в музыке. Здесь все понятно - в спектре есть элементы, позволяющие определить, как ступени текущего аккорда, так и построить четкую сетку времени (особенно, при наличие Drums). Замена тембра голоса - не RVC, а генерация "с нуля" из вокальных банков Riffusion.
2. Гармонизация. Если только вокал, а музыки нет, то определение сетки Time/Freq. часто затруднено. В жизни далеко не всегда мелодия строится строго по ступеням лада (тогда гармония становится очевидной). К слову, на практике иногда почти вся мелодия пропевается на доминанте, к которой подходят аккорды 6-ти ступеней лада из 7-ми, т.ч. вариантов гармонизации м.б. множество. Итог - разброс в гармонизации и вариации темпа при Swap Vocal только от голоса. В целом гармонизация Riffusion не всегда логична, типична, для выбранного стиля. Конечно, она и у людей бывает любая.
1. Генерация мелодии правильная на любую гармонию, если она явная в музыке. Здесь все понятно - в спектре есть элементы, позволяющие определить, как ступени текущего аккорда, так и построить четкую сетку времени (особенно, при наличие Drums). Замена тембра голоса - не RVC, а генерация "с нуля" из вокальных банков Riffusion.
2. Гармонизация. Если только вокал, а музыки нет, то определение сетки Time/Freq. часто затруднено. В жизни далеко не всегда мелодия строится строго по ступеням лада (тогда гармония становится очевидной). К слову, на практике иногда почти вся мелодия пропевается на доминанте, к которой подходят аккорды 6-ти ступеней лада из 7-ми, т.ч. вариантов гармонизации м.б. множество. Итог - разброс в гармонизации и вариации темпа при Swap Vocal только от голоса. В целом гармонизация Riffusion не всегда логична, типична, для выбранного стиля. Конечно, она и у людей бывает любая.
AH
00:33
Udio: метод лентяя
Udio 1-й раз попробовал год назад, вот заметки: "очень долго и всего 32 сек! (udio-32) и 2:11 в udio-130, ударения хуже Suno и СТРАННЫЕ слова! Но живенько и вокал почище". Генерации показались развязными, особенно в вокале, а я все-таки приверженец* чего-то более приглаженного. В итоге 90% моих генераций в Suno.
* музыкой сам начал заниматься в 1973 (ДМШ - не в счет) - времена, когда музыканты интенсивно осваивали ЭМИ, внедрялась многоканальная запись, композиторы искали новые тембры, звукорежиссеры склонялись к чистому/ студийному звуку. Чуть позже я увлекся муз. электроникой, + лирика мне ближе, поэтому ориентиры - Manfred Mann, Emerson Lake & Palmer, Yes. Т.ч. в итоге мне по звуку Wings интереснее, чем The Beatles, Pat Metheny - чем Jimi Hendrix.
Борис давно подбивал на Udio, даже как-то платный тариф организовал, но... Вот пару недель назад я сделал свою песню "Идеальный день"** до конца (на Free), но по-своему.
** оригинал - 21 г. после вебинара Lee с тем же названием.
👍
4
🔥
1
Udio 1-й раз попробовал год назад, вот заметки: "очень долго и всего 32 сек! (udio-32) и 2:11 в udio-130, ударения хуже Suno и СТРАННЫЕ слова! Но живенько и вокал почище". Генерации показались развязными, особенно в вокале, а я все-таки приверженец* чего-то более приглаженного. В итоге 90% моих генераций в Suno.
* музыкой сам начал заниматься в 1973 (ДМШ - не в счет) - времена, когда музыканты интенсивно осваивали ЭМИ, внедрялась многоканальная запись, композиторы искали новые тембры, звукорежиссеры склонялись к чистому/ студийному звуку. Чуть позже я увлекся муз. электроникой, + лирика мне ближе, поэтому ориентиры - Manfred Mann, Emerson Lake & Palmer, Yes. Т.ч. в итоге мне по звуку Wings интереснее, чем The Beatles, Pat Metheny - чем Jimi Hendrix.
Борис давно подбивал на Udio, даже как-то платный тариф организовал, но... Вот пару недель назад я сделал свою песню "Идеальный день"** до конца (на Free), но по-своему.
** оригинал - 21 г. после вебинара Lee с тем же названием.
00:33
Style: Jazz blues, R&B, Deep soul. Для этой песни такая задорная манера от Udio показалась подходящей 😊.
Генерил частями, Verse + Chorus, Bridge... Extension (До и После) и т.д. - всего 22 трека (фрагмента). Затем собрал все в Reaper, это напомнило студийную работу - запись нескольких дублей и сборка финального трека из самых удачных.
В общем, не смог заставить себя возиться в самом Udio - лень, каюсь 😊. Пользоваться привычным оказалось проще и быстрее - тут намного больше свободы - где врезать проигрыш, какой вариант саксофона или органа и т.п. - пару кликов мышки + прослушать, проигрывая по петле, чуть подправить. Т.ч. если пользуетесь нормальной DAW (где работать с треками и фэйдами легко) - очень рекомендую.
👍
4
Генерил частями, Verse + Chorus, Bridge... Extension (До и После) и т.д. - всего 22 трека (фрагмента). Затем собрал все в Reaper, это напомнило студийную работу - запись нескольких дублей и сборка финального трека из самых удачных.
В общем, не смог заставить себя возиться в самом Udio - лень, каюсь 😊. Пользоваться привычным оказалось проще и быстрее - тут намного больше свободы - где врезать проигрыш, какой вариант саксофона или органа и т.п. - пару кликов мышки + прослушать, проигрывая по петле, чуть подправить. Т.ч. если пользуетесь нормальной DAW (где работать с треками и фэйдами легко) - очень рекомендую.
AH
00:04
M.Shulman и S.Watkinson
Была? Будет? Происходит сейчас!
Ну что, ИИ революция в муз-индустрии свершается, на мой взгляд, прямо сейчас.
2 года назад музыканты говорили: "ИИ?.. Никогда!". И действительно, качество звука было невысоко, местами другие ляпы... Год назад они погрустнели, так как:
а) уже не все смогли отличить ИИ генерацию от живого.
б) была обида от крушения мечт - "я же полжизни потратил, чтобы … !"
Понятно - ИИ теперь за секунды делает то, на что человеку (точнее, команде) нужны часы (+ до этого годы обучения). Причем, музыкальный результат ИИ лучше по многим параметрам, чем у среднего проф. автора/ группы. Кто-то скажет: "Но ИИ не создаст шедевр, т.к. не чувствует, не переживает"...
Фокус в том, что ему и не нужно (!) - чувства, переживания на стороне слушателя. Все просто, музыка - ключ к воспоминаниям, образам. Можно заплакать и от дорогой сердцу мелодии в исполнении дверного звонка... ИИ уже в хит-парадах, а что-то цепляет не меньше живого. ОК, проверим лет ч/з 15-20 😊.
👍
6
🔥
5
Была? Будет? Происходит сейчас!
Ну что, ИИ революция в муз-индустрии свершается, на мой взгляд, прямо сейчас.
2 года назад музыканты говорили: "ИИ?.. Никогда!". И действительно, качество звука было невысоко, местами другие ляпы... Год назад они погрустнели, так как:
а) уже не все смогли отличить ИИ генерацию от живого.
б) была обида от крушения мечт - "я же полжизни потратил, чтобы … !"
Понятно - ИИ теперь за секунды делает то, на что человеку (точнее, команде) нужны часы (+ до этого годы обучения). Причем, музыкальный результат ИИ лучше по многим параметрам, чем у среднего проф. автора/ группы. Кто-то скажет: "Но ИИ не создаст шедевр, т.к. не чувствует, не переживает"...
Фокус в том, что ему и не нужно (!) - чувства, переживания на стороне слушателя. Все просто, музыка - ключ к воспоминаниям, образам. Можно заплакать и от дорогой сердцу мелодии в исполнении дверного звонка... ИИ уже в хит-парадах, а что-то цепляет не меньше живого. ОК, проверим лет ч/з 15-20 😊.
AH
00:10
MusicHero и Suno API*
* API - правила взаимодействия с системой извне с помощью команд.
Иногда смотрю, что нового, типа Suno/ Udio, появилось. Наткнулся на MusicHero - интересно, как звучит!? Залогинился, сгенерил "Кино" (мой тестовый текст) - звук, вроде, как у Suno v4. Послал Борису, он говорит - "да, похоже". ОК, иду в Suno (v4), генерю с тем же Style: Funk traditional 1980s, male vocals, emotional singer, distortion guitar solo.
Вау, треки-близнецы! Cмотрю MusicHero дальше:
▪ хороший звук, не требует мастера АЧХ
▪ чистый русский
▪ правильные мелодии, гармонии
▪ на free нет скачки и НЕ приват
▪ похоже, 4 мин. максимум
▪ если логиниться, треки хранятся 7 дн.
Есть Ru раздел! Без login, песни в общем списке (похоже одна из 2-х сгенерир.). Там всего 20х50 = 1000 треков. Новый добавлен - последний из списка удален. Видно народ генерит ~1000 в день, т.ч. через 2 дня трека уже нет. После 4-х генераций (8 треков) сбросил из Ru на обычный, показал капчу, а затем: "Услуга временно ограничена..."
👍
4
* API - правила взаимодействия с системой извне с помощью команд.
Иногда смотрю, что нового, типа Suno/ Udio, появилось. Наткнулся на MusicHero - интересно, как звучит!? Залогинился, сгенерил "Кино" (мой тестовый текст) - звук, вроде, как у Suno v4. Послал Борису, он говорит - "да, похоже". ОК, иду в Suno (v4), генерю с тем же Style: Funk traditional 1980s, male vocals, emotional singer, distortion guitar solo.
Вау, треки-близнецы! Cмотрю MusicHero дальше:
▪ хороший звук, не требует мастера АЧХ
▪ чистый русский
▪ правильные мелодии, гармонии
▪ на free нет скачки и НЕ приват
▪ похоже, 4 мин. максимум
▪ если логиниться, треки хранятся 7 дн.
Есть Ru раздел! Без login, песни в общем списке (похоже одна из 2-х сгенерир.). Там всего 20х50 = 1000 треков. Новый добавлен - последний из списка удален. Видно народ генерит ~1000 в день, т.ч. через 2 дня трека уже нет. После 4-х генераций (8 треков) сбросил из Ru на обычный, показал капчу, а затем: "Услуга временно ограничена..."
AH
00:04
Riffusion: Гармонизация? Кошмар!
В моем примере* с фортепиано - точно. Сделал Swap - 7 Vocal и 5 Sound. Мелодии генерирует правильно, хотя пьеса не простая, но вот музыку 😢
* в 1999 разрабатывал алгоритмы. Сделал в MIDI "Tale of the Broken Airplane". Примечательно, что:
а) вся партия фо-но сгенерирована.
б) мелодию 1 ч. сочинил, подобрал гармонию. Части 2,3,4 получены морфингом партитуры - ритмика сохранена, а мелодия и гармония изменены, что даёт разный характер.
* в 2004 за одну ночь написал повесть (1 раз в жизни 😊) "Элав с планеты птиц" (ISBN 5-9554-0013-3).
* в 2005 записал вокальную версию (CD"Hot Stuff Dreams", Canada) - текст А.Яковлев (с моей рыбы, Ru), вокал - Е.Силантьева, рояль - Р.Столяр.
На днях из Swap Vocal версий собрал трек:
1 ч. 0:03 Male vocals, dramatic singer. Var 90%. Голос местами агендерный.
2 ч. 1:01 Male vocals, baritone, opera manner. Var 100%.
3 ч. 1:50 Male vocals, tenor, opera manner. Var 100%.
4 ч. 2:38 Female vocals, soprano singer, opera manner. Var 100%.
В моем примере* с фортепиано - точно. Сделал Swap - 7 Vocal и 5 Sound. Мелодии генерирует правильно, хотя пьеса не простая, но вот музыку 😢
* в 1999 разрабатывал алгоритмы. Сделал в MIDI "Tale of the Broken Airplane". Примечательно, что:
а) вся партия фо-но сгенерирована.
б) мелодию 1 ч. сочинил, подобрал гармонию. Части 2,3,4 получены морфингом партитуры - ритмика сохранена, а мелодия и гармония изменены, что даёт разный характер.
* в 2004 за одну ночь написал повесть (1 раз в жизни 😊) "Элав с планеты птиц" (ISBN 5-9554-0013-3).
* в 2005 записал вокальную версию (CD"Hot Stuff Dreams", Canada) - текст А.Яковлев (с моей рыбы, Ru), вокал - Е.Силантьева, рояль - Р.Столяр.
На днях из Swap Vocal версий собрал трек:
1 ч. 0:03 Male vocals, dramatic singer. Var 90%. Голос местами агендерный.
2 ч. 1:01 Male vocals, baritone, opera manner. Var 100%.
3 ч. 1:50 Male vocals, tenor, opera manner. Var 100%.
4 ч. 2:38 Female vocals, soprano singer, opera manner. Var 100%.
AH
00:06
Прозу в стих ... В отпуск! *
* В Адлере уже 2 недели настоящее лето... я собрался в отпуск - Красноярск, Новосибирск ... поэтому и старался в последние дни "отписаться".
Давно интересовало, как прозу с ИИ превратить в стихи, или их подправить. Притом, что Suno и другие любой текст укладывают в ритм/ мелодию, текст сильно влияет на музыку - иногда система сама задает [Spoken word] для прозы. Но хочется больше гарантий, т.ч. правильный размер и рифма желательны.
На днях знакомая прислала ссылку на прогноз на июль 2025 от lee. Решил на этом оптимистичном тексте (полагаю, господин lee не будет против 😊) и попробовать - от экономистов / политологов позитива мало ☹. Сначала я этот пост сократил...
На запрос "convert prose into verse" мало что находится. Но тут на GPTunnel рядом с Suno увидел Mureka (новый муз. ИИ). На Free у него всё крайне ограничено (2 кредита = одна генерация), т.ч. тестить его пока не получится. Хотя там есть весьма интересная опция - Personalized Model ($99)!
👍
1
🔥
1
* В Адлере уже 2 недели настоящее лето... я собрался в отпуск - Красноярск, Новосибирск ... поэтому и старался в последние дни "отписаться".
Давно интересовало, как прозу с ИИ превратить в стихи, или их подправить. Притом, что Suno и другие любой текст укладывают в ритм/ мелодию, текст сильно влияет на музыку - иногда система сама задает [Spoken word] для прозы. Но хочется больше гарантий, т.ч. правильный размер и рифма желательны.
На днях знакомая прислала ссылку на прогноз на июль 2025 от lee. Решил на этом оптимистичном тексте (полагаю, господин lee не будет против 😊) и попробовать - от экономистов / политологов позитива мало ☹. Сначала я этот пост сократил...
На запрос "convert prose into verse" мало что находится. Но тут на GPTunnel рядом с Suno увидел Mureka (новый муз. ИИ). На Free у него всё крайне ограничено (2 кредита = одна генерация), т.ч. тестить его пока не получится. Хотя там есть весьма интересная опция - Personalized Model ($99)!
AH
13:18
Проза в стих с Songly Gift
(не удержался 😊 )...
Сгенерил 3 текста для "Офигенно", для генерации самой песни заслал 120 р. ОК, а с задачей посложнее?*
* Приятель так тренирует память: записывает фразы из к/ф, потом читая, вспоминает сценки.
ОК, я как-то записал фразы из к/ф "Покровские ворота" - море крылатых 😂. Память еще не проверял, а текст остался:
(не удержался 😊 )...
Сгенерил 3 текста для "Офигенно", для генерации самой песни заслал 120 р. ОК, а с задачей посложнее?*
* Приятель так тренирует память: записывает фразы из к/ф, потом читая, вспоминает сценки.
ОК, я как-то записал фразы из к/ф "Покровские ворота" - море крылатых 😂. Память еще не проверял, а текст остался:
Это был последний укол. Я привык к вашим рукам. У нее напряженная духовная жизнь.Так много нервных больных. Поднатужтесь, вы же талантливый человек. Не надо бояться жить. Ой, у вас уже губки дрожат. Ночи чреваты сюрпризами. Наши играют французскую жизнь. Искусство в большом долгу. В шорах своей предубеждённости. Перестали быть супругами, но остались родными людьми. Высокие, высокие отношения! Нормальные для духовных людей. В суе, прошу, не поминать. Такой образованный человек. Не понимаете элементарных вещей. Веду иллюзорную жизнь. Смешно рассчитывать на взаимность? Вы весь из достоинств! Будьте творцом своей биографии! Как человек, он очень хороший.
AH
21:13
ИИ - хороший* композитор! Как украсть его работу?
* опять повод вспомнить фразу шефа: "Лёша, если у вас не воруют то, что вы делаете, вы делаете фуфло" 😊
... Результат Suno нравился с самого начала. Правда тогда я не осмеливался говорить, что это лучше среднестатистических песен и любителей, и профессионалов. 10 версий одной песни - и все хороши, как в мелодии, так и в аранжировке!
Мелодист "от природы" генерит мелодии легко и много, но таких мало. С аранжировкой чуть проще - тут больше рутины, можно делать по образцу. Конечно, профессионал может мелодию конструировать, отслеживая, что непохожа на известные, но... все-таки желательно вдохновение, озарение.
Как ни странно, большинство проф. музыкантов не умеют сочинять - знают почти все о музыке, но играют только с нот. Уроки импровизации (первый шаг к сочинительству) крайне редки в программах исполнителей в ДМШ, колледже, консерватории.
Любители обычно "скатываются" к знакомому - у одного клиента более 50 песен напоминали "Шаланды полные кефали..." 😢
❤
3
👍
3
* опять повод вспомнить фразу шефа: "Лёша, если у вас не воруют то, что вы делаете, вы делаете фуфло" 😊
... Результат Suno нравился с самого начала. Правда тогда я не осмеливался говорить, что это лучше среднестатистических песен и любителей, и профессионалов. 10 версий одной песни - и все хороши, как в мелодии, так и в аранжировке!
Мелодист "от природы" генерит мелодии легко и много, но таких мало. С аранжировкой чуть проще - тут больше рутины, можно делать по образцу. Конечно, профессионал может мелодию конструировать, отслеживая, что непохожа на известные, но... все-таки желательно вдохновение, озарение.
Как ни странно, большинство проф. музыкантов не умеют сочинять - знают почти все о музыке, но играют только с нот. Уроки импровизации (первый шаг к сочинительству) крайне редки в программах исполнителей в ДМШ, колледже, консерватории.
Любители обычно "скатываются" к знакомому - у одного клиента более 50 песен напоминали "Шаланды полные кефали..." 😢
_4sm.mp4_thumb.jpg)
21:15
Комментарий Бориса по ИИ детектированию.
... Да, это сейчас проблема ☹. Насчет переписывания музыки, все верно. Например, переписать трек электронной музыки в FL studio - одна знакомая так делает.
Но дальше будет сложнее. Я уверен, что все (Suno, Riffusion, Udio) введут в ближайшее время "отпечатки" песен в своих базах.
Как Shazam или Youtube Контент. Поэтому будет примерно так: заливаешь трек в Youtube, а он говорит - "Этот трек был сделан в Суно 22 авг. 2025 года, пользователем Pupkin. Бесплатная версия. Пожалуйста подтвердите права на этот трек".
Думаю будет так. И тут вперед выйдут китайские оффлайн модели, где можно будет генерировать музыку локально на компьютере 🔥.
В начало поста ⬆.
👍
7
👏
2
🔥
1
... Да, это сейчас проблема ☹. Насчет переписывания музыки, все верно. Например, переписать трек электронной музыки в FL studio - одна знакомая так делает.
Но дальше будет сложнее. Я уверен, что все (Suno, Riffusion, Udio) введут в ближайшее время "отпечатки" песен в своих базах.
Как Shazam или Youtube Контент. Поэтому будет примерно так: заливаешь трек в Youtube, а он говорит - "Этот трек был сделан в Суно 22 авг. 2025 года, пользователем Pupkin. Бесплатная версия. Пожалуйста подтвердите права на этот трек".
Думаю будет так. И тут вперед выйдут китайские оффлайн модели, где можно будет генерировать музыку локально на компьютере 🔥.
В начало поста ⬆.
AH
00:01
Suno Cover - это точно "Voilà"!
Как я мог это (функцию кавер) пропустить? Давно мечтал о ИИ сервисе, кот. черновик превращает в качественный финальный трек - делает ресинтез/ реставрацию. Это 🔥🔥🔥.
Недавно пытался решать вопрос с Riffusion (Swap Sound) - система хронически не соблюдает исходную гармонию (L1). Я попробовал на "Alove" в v3.5 фортепианный аккомпанемент заменить на симфонический оркестр и, вспоминая Riffusion, взял только 1-ю часть - опять не то. ОК, надо делать все правильно - дать Suno непростую, но явную гармонию.
Сочинил мелодию, текст, собрал простой трек (GM) - фоно, бас, ударные, LeadSynth + голос (записал на диктофон в телефоне). Сделал 2 DS с вокалом и без. Как бы короткая песня: Intro, Verse, Chorus, Instrumental Bridge, Chorus, Chorus. Длительность 2:12.
Verse:
Am, Ab5+, Am7/G, Gb5-
Dm, Db5+, F/C, Bm5-7
C, Em/B, Gm6/Bb, A7
Dm, Db5+, F/C, Bm5-7
Chorus:
C, G, Am, G
C, G, Am, G
Начал тестировать с v3.5, а тут Борис настроил мне платный, т.ч. смог проверить и на v4, v4.5 😊
Как я мог это (функцию кавер) пропустить? Давно мечтал о ИИ сервисе, кот. черновик превращает в качественный финальный трек - делает ресинтез/ реставрацию. Это 🔥🔥🔥.
Недавно пытался решать вопрос с Riffusion (Swap Sound) - система хронически не соблюдает исходную гармонию (L1). Я попробовал на "Alove" в v3.5 фортепианный аккомпанемент заменить на симфонический оркестр и, вспоминая Riffusion, взял только 1-ю часть - опять не то. ОК, надо делать все правильно - дать Suno непростую, но явную гармонию.
Сочинил мелодию, текст, собрал простой трек (GM) - фоно, бас, ударные, LeadSynth + голос (записал на диктофон в телефоне). Сделал 2 DS с вокалом и без. Как бы короткая песня: Intro, Verse, Chorus, Instrumental Bridge, Chorus, Chorus. Длительность 2:12.
Verse:
Am, Ab5+, Am7/G, Gb5-
Dm, Db5+, F/C, Bm5-7
C, Em/B, Gm6/Bb, A7
Dm, Db5+, F/C, Bm5-7
Chorus:
C, G, Am, G
C, G, Am, G
Начал тестировать с v3.5, а тут Борис настроил мне платный, т.ч. смог проверить и на v4, v4.5 😊
AH
00:03
Suno, Cover: минус из MIDI
Сделать минус - значит получить трек в котором: нужный стиль, темп, тональность, гармония, форма (структура), инструментальные соло в Intro, Bridge, Outro, а часто и обыгрыши вокала в купл./ припеве.
Продолжил тему - собрал простой MIDI минус в OnyxArranger 2.1* - черновик, чтобы "раскрасить", улучшить с Cover v4.5. Аккорды в купл./ припеве, как в "Stumblin' in" (Chris Norman, Suzi Quatro) - море песен с такой гармонией 😊. Вот форма:
Intro - 8 Bars (Solo) [Em, D, G, G] x 2
Verse 1 - 16 Bars [Am, D, G, Em] x 4
Chorus 1 - 16 Bars [Am, D, G, Em] x 4
Bridge - 8 Bars (Solo)
Verse 2 - как куплет 1
Chorus 2 - как припев 1 ( + элементы Solo)
Outro - 8 Bars (Solo) + замедление
Intro, Bridge, Outro - идентичные.
Записал с Yamaha MU100R (GМ) в mp3 - получился DS. 120 BPM, G major, стиль вроде British Beat.
* разрабатывал его давно, но все еще пользуюсь 😊
👍
1
🔥
1
Сделать минус - значит получить трек в котором: нужный стиль, темп, тональность, гармония, форма (структура), инструментальные соло в Intro, Bridge, Outro, а часто и обыгрыши вокала в купл./ припеве.
Продолжил тему - собрал простой MIDI минус в OnyxArranger 2.1* - черновик, чтобы "раскрасить", улучшить с Cover v4.5. Аккорды в купл./ припеве, как в "Stumblin' in" (Chris Norman, Suzi Quatro) - море песен с такой гармонией 😊. Вот форма:
Intro - 8 Bars (Solo) [Em, D, G, G] x 2
Verse 1 - 16 Bars [Am, D, G, Em] x 4
Chorus 1 - 16 Bars [Am, D, G, Em] x 4
Bridge - 8 Bars (Solo)
Verse 2 - как куплет 1
Chorus 2 - как припев 1 ( + элементы Solo)
Outro - 8 Bars (Solo) + замедление
Intro, Bridge, Outro - идентичные.
Записал с Yamaha MU100R (GМ) в mp3 - получился DS. 120 BPM, G major, стиль вроде British Beat.
* разрабатывал его давно, но все еще пользуюсь 😊
AH
00:04
Suno, Cover: реставрация?
Продолжая L1, L2, решил почистить 2 трека нашей студ. группы (с танцев в ДК "Энергия", Новосибирск, 1980 г.). Запись на магнитофон "Комета-212", затем "наложение" вторых клавиш при перезаписи на др. Комету 😢. В блюзе "После работы" ("ATW") дописывал убитое пианино, а в инструм. "Airplane" - второй синтезатор* .
* в 1978-м я собрал а-ля "Minimoog", думаю, за Уралом такой самопал был первым.
Сделал много генераций (v4.5) - 20 для "ATW" и 12 для "Airplane", результат неважный, если речь о восстановлении качества, без изменения партий. Игрался с параметрами (Weirdness, Style influence, Audio influence - как 20,60,90 и т.п.). Побаловался с "ATW" - из исходного текста сгенерил в Songly Gift новый (и поправил), а также на английском 😊
Примеры: исходник (DS), затем генерации (по 2 мин.) в порядке отхода от оригинала.
"ATW"
0:00 - DS
2:00 - 202090
4:00 - 206090
6:00 - 206090 new Ru
8:00 - 206090 En
"Airplane"
0:00 - DS
2:00 - 206080
4:00 - 205090
6:00 - 209050
8:00 - 209050
👍
3
Продолжая L1, L2, решил почистить 2 трека нашей студ. группы (с танцев в ДК "Энергия", Новосибирск, 1980 г.). Запись на магнитофон "Комета-212", затем "наложение" вторых клавиш при перезаписи на др. Комету 😢. В блюзе "После работы" ("ATW") дописывал убитое пианино, а в инструм. "Airplane" - второй синтезатор* .
* в 1978-м я собрал а-ля "Minimoog", думаю, за Уралом такой самопал был первым.
Сделал много генераций (v4.5) - 20 для "ATW" и 12 для "Airplane", результат неважный, если речь о восстановлении качества, без изменения партий. Игрался с параметрами (Weirdness, Style influence, Audio influence - как 20,60,90 и т.п.). Побаловался с "ATW" - из исходного текста сгенерил в Songly Gift новый (и поправил), а также на английском 😊
Примеры: исходник (DS), затем генерации (по 2 мин.) в порядке отхода от оригинала.
"ATW"
0:00 - DS
2:00 - 202090
4:00 - 206090
6:00 - 206090 new Ru
8:00 - 206090 En
"Airplane"
0:00 - DS
2:00 - 206080
4:00 - 205090
6:00 - 209050
8:00 - 209050
AH
00:01
Suno, Cover: текущие итоги
Продолжение L1, L2, L3. Снова генерил минус из MIDI- черновика. Собрал DS с формой: Intro, Verse1, Chorus1, Bridge, Verse2, Chorus2, Outro. В Intro, Bridge, Outro разные гармонии и Solo. В купл./прип. Solo прописано короткими нотками на 2-ю и 4-ю доли и разные аккорды.
Сначала сгенерил минусы - нотки в купл./прип. немного помогли - Suno меньше втыкал в них Solo. В 14 треках (7 генераций) в 40% форма и гармония, как в DS.
На этом же DS сгенерил треки с вокалом (текст Songly Gift, чуть правленный). Выбрал удачный, вытащил вокал и собрал с тремя минусами. Назвал "Зачем мне всё.." Все примеры на сайте.
Идти этим путём можно, но 100% гарантии нет. Если баланс Style/ Audio influence в сторону Audio (пусть 50/90), то гармония/ форма соблюдаются лучше, но стиль не так заметен. Если наоборот (90/50) - стиль ярче, но гармония уже другая (%% здесь условные). Благо мелодии обычно сохраняются.
Т.ч. все-таки MIDI-черновик с вокалом кажется более надежным способом создания минуса.
🔥
4
Продолжение L1, L2, L3. Снова генерил минус из MIDI- черновика. Собрал DS с формой: Intro, Verse1, Chorus1, Bridge, Verse2, Chorus2, Outro. В Intro, Bridge, Outro разные гармонии и Solo. В купл./прип. Solo прописано короткими нотками на 2-ю и 4-ю доли и разные аккорды.
Сначала сгенерил минусы - нотки в купл./прип. немного помогли - Suno меньше втыкал в них Solo. В 14 треках (7 генераций) в 40% форма и гармония, как в DS.
На этом же DS сгенерил треки с вокалом (текст Songly Gift, чуть правленный). Выбрал удачный, вытащил вокал и собрал с тремя минусами. Назвал "Зачем мне всё.." Все примеры на сайте.
Идти этим путём можно, но 100% гарантии нет. Если баланс Style/ Audio influence в сторону Audio (пусть 50/90), то гармония/ форма соблюдаются лучше, но стиль не так заметен. Если наоборот (90/50) - стиль ярче, но гармония уже другая (%% здесь условные). Благо мелодии обычно сохраняются.
Т.ч. все-таки MIDI-черновик с вокалом кажется более надежным способом создания минуса.
AH
00:03
Suno, Cover: из сырого вокала
Продолжение (L1,L2,L3,L4). Теперь тесты, что v4.5 может генерировать из сырого вокала*
* пора извиниться за свои голосовые, часто не эстетичные примеры ☹ ... Большинство женщин не выходят из дома без наведения красоты, вокалисты обычно не выкладывают сырой вокал... У меня тут нет выхода - так быстрее, чем кого-то просить, согласовывать и, кажется, так легче мотивировать любителей на собственные эксперименты 😎.
Сгенерил в Songly Gift 2 купл., припев, подправил, назвал "Вещий сон".
1. Сначала пропел простую мелодию в Am, 120bpm, НЕ применял autotune. Сгенерил** несколько треков. В примере 1/2 куп. + припев, сначала DS, затем:
0:32 206080, Bossa nova..
1:06 206080, Synth-pop..
1:41 203090, Country pop..
2:17 101090, Male vocals
2:52 309060, Rock 'n' roll..
**во всех стилях было [Male vocals], полные композиции и Style на сайте.
Тональности получились разные, чаще Cm/Eb, похоже из-за того, что 1-е ноты в DS (Ми) занижены до Eb. Темп и ритмика в целом, как в DS.
👍
2
Продолжение (L1,L2,L3,L4). Теперь тесты, что v4.5 может генерировать из сырого вокала*
* пора извиниться за свои голосовые, часто не эстетичные примеры ☹ ... Большинство женщин не выходят из дома без наведения красоты, вокалисты обычно не выкладывают сырой вокал... У меня тут нет выхода - так быстрее, чем кого-то просить, согласовывать и, кажется, так легче мотивировать любителей на собственные эксперименты 😎.
Сгенерил в Songly Gift 2 купл., припев, подправил, назвал "Вещий сон".
1. Сначала пропел простую мелодию в Am, 120bpm, НЕ применял autotune. Сгенерил** несколько треков. В примере 1/2 куп. + припев, сначала DS, затем:
0:32 206080, Bossa nova..
1:06 206080, Synth-pop..
1:41 203090, Country pop..
2:17 101090, Male vocals
2:52 309060, Rock 'n' roll..
**во всех стилях было [Male vocals], полные композиции и Style на сайте.
Тональности получились разные, чаще Cm/Eb, похоже из-за того, что 1-е ноты в DS (Ми) занижены до Eb. Темп и ритмика в целом, как в DS.
AH
01:23
Исправление вокала: Suno > Riffusion
Ранее я уже затрагивал тему исправления ошибок в вокале в генерациях Suno. Теперь — более легкий способ ("полуавтомат").
Кажется, с платным тарифом v4.5 ошибок с ударением или не той гласной, меньше, чем в v3.5. Однако, часто бывает ситуация, когда жалко отказываться от хорошего варианта. Тут может помочь функция Swap vocals версии FUZZ 1.1 (free) в "классической" Riffusion. Причем, все можно сделать с Audacity.
1. Вырезаем небольшой фрагмент с ошибкой. С "запасом" — с парой слов/ слогов до и после. В моих экспериментах получалось 3-5 сек.
2. Загружаем его в Riffusion (Upload) — система транскрибирует вокал.
3. Корректируем Lyrics. Для ударения пишем гласную с диакрити́ческим зна́ком (заглавные и удлиннение гласной у меня в Riffusion не работали). Для правильного произношения, если это необходимо, меняем гласную, т.е. делаем орфографическую ошибку.
4. Задаем параметры — от них во многом зависит результат.
5. Генерим несколько, меняя параметры, и выбираем лучший.
👍
2
Ранее я уже затрагивал тему исправления ошибок в вокале в генерациях Suno. Теперь — более легкий способ ("полуавтомат").
Кажется, с платным тарифом v4.5 ошибок с ударением или не той гласной, меньше, чем в v3.5. Однако, часто бывает ситуация, когда жалко отказываться от хорошего варианта. Тут может помочь функция Swap vocals версии FUZZ 1.1 (free) в "классической" Riffusion. Причем, все можно сделать с Audacity.
1. Вырезаем небольшой фрагмент с ошибкой. С "запасом" — с парой слов/ слогов до и после. В моих экспериментах получалось 3-5 сек.
2. Загружаем его в Riffusion (Upload) — система транскрибирует вокал.
3. Корректируем Lyrics. Для ударения пишем гласную с диакрити́ческим зна́ком (заглавные и удлиннение гласной у меня в Riffusion не работали). Для правильного произношения, если это необходимо, меняем гласную, т.е. делаем орфографическую ошибку.
4. Задаем параметры — от них во многом зависит результат.
5. Генерим несколько, меняя параметры, и выбираем лучший.
AH
00:08
Suno, Cover: «На свободу с чистой...»
Это название моей статьи на Хабре — обобщение экспериментов с Cover (Suno v4.5), уже представленных в канале (L1, L2, L3, L4, L5), плюс частное мнение об основной претензии к музыкальным ИИ (обучение на известных примерах) и более подробный разбор причины ошибок в гармонии как при обновлении музыки, так и при гармонизации вокала.
В комментариях к статье один из вопросов касался каверов на известные композиции (как правило, стараюсь этого не делать, а если сделал, то не выкладывать). К слову, для кавера по закону нужно разрешение от автора/ правообладателя. То, что и до ИИ этого было много, понятно: тысячи коллективов делают каверы, к примеру, ребята, играющие в ресторанах, не говоря уже о любителях. Порой это превосходные образцы. Но маловероятно, что во всех таких случаях были получены разрешения.
Возможно, Борис, когда у него появится свободное время, поделится хитростями преодоления запрета Suno на работу с треками известных артистов 😎.
👍
10
🔥
3
Это название моей статьи на Хабре — обобщение экспериментов с Cover (Suno v4.5), уже представленных в канале (L1, L2, L3, L4, L5), плюс частное мнение об основной претензии к музыкальным ИИ (обучение на известных примерах) и более подробный разбор причины ошибок в гармонии как при обновлении музыки, так и при гармонизации вокала.
В комментариях к статье один из вопросов касался каверов на известные композиции (как правило, стараюсь этого не делать, а если сделал, то не выкладывать). К слову, для кавера по закону нужно разрешение от автора/ правообладателя. То, что и до ИИ этого было много, понятно: тысячи коллективов делают каверы, к примеру, ребята, играющие в ресторанах, не говоря уже о любителях. Порой это превосходные образцы. Но маловероятно, что во всех таких случаях были получены разрешения.
Возможно, Борис, когда у него появится свободное время, поделится хитростями преодоления запрета Suno на работу с треками известных артистов 😎.
AH
00:01
Нетипичный запрос — необычный результат
Знакомая из театральной студии посетовала, что у ИИ всё какое-то правильное, позитивное, несерьёзное ☹ ... и задала вопрос: как сгенерить странную музыку? Я себе расшифровал это так: что-то "вне тональности и ритма, со странным пением и депрессивное".
Понял, что Punk, Thrash metal, Psychedelic или Avant-garde jazz, здесь, похоже, не подойдут. Как должен подобный стиль называться? Может что-то из Movie horror или из Computer game? И хотя самому ближе акустика, лирика, слегка jazzy, начал пробовать.
Проверил чужие промпты (+ Creative boost). В итоге, с учётом темы пьесы:"Молодой человек в поисках смыслов, непринятие реальности, проблемы с психикой и т.п.", описал формально. Получилось так:
🔥
4
Знакомая из театральной студии посетовала, что у ИИ всё какое-то правильное, позитивное, несерьёзное ☹ ... и задала вопрос: как сгенерить странную музыку? Я себе расшифровал это так: что-то "вне тональности и ритма, со странным пением и депрессивное".
Понял, что Punk, Thrash metal, Psychedelic или Avant-garde jazz, здесь, похоже, не подойдут. Как должен подобный стиль называться? Может что-то из Movie horror или из Computer game? И хотя самому ближе акустика, лирика, слегка jazzy, начал пробовать.
Проверил чужие промпты (+ Creative boost). В итоге, с учётом темы пьесы:"Молодой человек в поисках смыслов, непринятие реальности, проблемы с психикой и т.п.", описал формально. Получилось так:
Male vocals, a singer with an unstable psyche, with frequent mood swings, strange, atonal music, experimental, depressive jazz, variable tempo, no stable rhythm, a fantasy from a mental hospital
AH
00:02
Suno, Cover: обновляем "задавку"
"Минусовка", минус — от англ. minus one, т.е. фонограмма без одного инструмента, чаще — голоса. Хотя бывают и без гитары, баса, клавишных и др. для обучения или выступления.
Термин "задавка" появился давно и отражает способ получения минуса из полной фонограммы. 2-3 года как ИИ (VocalRemover) позволяет разделять инструментал и вокал (в последних моделях даже солиста и бэквокал) на порядок качественнее прежних методов. Однако действительно чистый* минус можно получить только из студии, где создали аранжировку, записывали песню, или когда он пишется кем-то заново специально.
* на цветной картинке заяц в невысокой траве на лугу. Вырезаем ножницами зайца: на нем немного травы, а на лугу — дыра. Теперь на зайце надо закрасить зелень, а на лугу её дорисовать. Такая примерно задача. Т.ч. даже c VocalRemover минус неидеальный.
За пару дней, как у меня закончился платный в Suno, добавили v5. А тут одни ребята задали вопрос: как улучшить задавку. ОК, еще один тест режима Cover 😊
🔥
2
"Минусовка", минус — от англ. minus one, т.е. фонограмма без одного инструмента, чаще — голоса. Хотя бывают и без гитары, баса, клавишных и др. для обучения или выступления.
Термин "задавка" появился давно и отражает способ получения минуса из полной фонограммы. 2-3 года как ИИ (VocalRemover) позволяет разделять инструментал и вокал (в последних моделях даже солиста и бэквокал) на порядок качественнее прежних методов. Однако действительно чистый* минус можно получить только из студии, где создали аранжировку, записывали песню, или когда он пишется кем-то заново специально.
* на цветной картинке заяц в невысокой траве на лугу. Вырезаем ножницами зайца: на нем немного травы, а на лугу — дыра. Теперь на зайце надо закрасить зелень, а на лугу её дорисовать. Такая примерно задача. Т.ч. даже c VocalRemover минус неидеальный.
За пару дней, как у меня закончился платный в Suno, добавили v5. А тут одни ребята задали вопрос: как улучшить задавку. ОК, еще один тест режима Cover 😊
AH
00:06
Что полезного есть на бесплатном Kits-ai? (#1)
Не раз уже упоминал Kits.ai — специализированный ресурс для замены тембра голоса (RVC). Последние месяцы функционал на бесплатном тарифе постоянно сокращался: уже нельзя натренировать*, загрузить свою модель, хранить несколько и др. Однако, хотя и требуется "танец с бубном", т.к. загрузки нет**, на Free-плане остаётся ещё много полезного. И 15 мин/мес на конвертации — уже что-то. (Если еще не пользовались, надо зарегиться — я делал ч/з Google).
* но можно модифицировать/ создать из их моделей.
** придётся записывать "с экрана". Я использую anyRec.
На сайте 4 раздела:
Convert, Generate, Clone Voices, Tools
Сегодня я хочу без особой детализации разобрать Tools.
Не раз уже упоминал Kits.ai — специализированный ресурс для замены тембра голоса (RVC). Последние месяцы функционал на бесплатном тарифе постоянно сокращался: уже нельзя натренировать*, загрузить свою модель, хранить несколько и др. Однако, хотя и требуется "танец с бубном", т.к. загрузки нет**, на Free-плане остаётся ещё много полезного. И 15 мин/мес на конвертации — уже что-то. (Если еще не пользовались, надо зарегиться — я делал ч/з Google).
* но можно модифицировать/ создать из их моделей.
** придётся записывать "с экрана". Я использую anyRec.
Если бы работал в студии, то, несомненно, сделал бы годовую подписку. А так, ради разовых задач, возиться с оплатой не хочется. Вполне возможно, что подобные преобразования (RVC, Split и др.) можно делать уже прямо в DAW с какими-то плагинами, не знаю — у Kits-ai много полезных инструментов.
На сайте 4 раздела:
Convert, Generate, Clone Voices, Tools
Сегодня я хочу без особой детализации разобрать Tools.
AH
00:10
Почему MIDI ?
Полученные в последние дни вопросы показали, что стоит уделить немного внимания теме MIDI* 😊.
* Musical Instrument Digital Interface — способ "общения" электронных музыкальных инструментов и программ с ними с помощью специальных команд. Эти команды (начать/ прекратить играть ноту, громкость, тембр и др.) можно сохранить в виде файла *.mid. По сути, это "электронная партитура", которая в графическом виде представляется в ПО в панели Piano-Roll...
Музыкальный ИИ, кажется, более других технических новаций способствовал вовлечению в творчество миллионов не музыкантов. Освоение муз. ИИ, пусть и не профессиональное, но... обучение музыке. Даже при простом применении ИИ надо разбираться в жанрах, инструментах, форме, каких-то муз. терминах. Если в голове вертится мелодия (или хотя бы ритмика) — её надо напеть, наиграть, а как? "Правильно или нет" слышу, а сам(а) спеть/ сыграть не могу 😕.
Так вот, нарисовать ноты в Piano-Roll в MIDI-редакторе (или DAW) — верный способ решить проблему.
Полученные в последние дни вопросы показали, что стоит уделить немного внимания теме MIDI* 😊.
* Musical Instrument Digital Interface — способ "общения" электронных музыкальных инструментов и программ с ними с помощью специальных команд. Эти команды (начать/ прекратить играть ноту, громкость, тембр и др.) можно сохранить в виде файла *.mid. По сути, это "электронная партитура", которая в графическом виде представляется в ПО в панели Piano-Roll...
Музыкальный ИИ, кажется, более других технических новаций способствовал вовлечению в творчество миллионов не музыкантов. Освоение муз. ИИ, пусть и не профессиональное, но... обучение музыке. Даже при простом применении ИИ надо разбираться в жанрах, инструментах, форме, каких-то муз. терминах. Если в голове вертится мелодия (или хотя бы ритмика) — её надо напеть, наиграть, а как? "Правильно или нет" слышу, а сам(а) спеть/ сыграть не могу 😕.
Так вот, нарисовать ноты в Piano-Roll в MIDI-редакторе (или DAW) — верный способ решить проблему.
AH
00:05
Что полезного есть на бесплатном Kits-ai? (#2)
Отмечал ранее: в Kits.ai (ресурс для RVC) 4 раздела. Смотрим Clone Voices, там 4 опции:
Instant Voice Cloning — создание речевой модели, DS всего 30 сек.
Professional Voice Cloning — создание своей/ чьей-то вокальной модели. Самая важная функция, но только на платном. Требование к DS, как и в Weights.
Voice Blender — смешивание голосов, причем даже речевых и инструментов. На free — только из библ. Kits, на платном — и из своих моделей. Берём две*, задаем пропорцию, жмём [Blend], сообщает Merging (смешивание), сразу предлагает выполнить RVC**. Грузим трек, обращаем внимание на кн. [Acapella] [With Instruments]. Если acapella, то сделает RVC и выдаст только измененный вокал, а не песню с музыкой.
* Взял Male Modern Soul и Solo Saxophone 50/50%.
** Там еще есть множество полезных настроек (Vibrato, EQ, Delay, Reverb и др.), но всё на платном.
В примере: DS (мой кавер "I Just Called", S.Wonder)
1:48 — Male+Sax (50/50%)
2:19 — только Male Modern Soul
❤
2
🔥
2
Отмечал ранее: в Kits.ai (ресурс для RVC) 4 раздела. Смотрим Clone Voices, там 4 опции:
Instant Voice Cloning — создание речевой модели, DS всего 30 сек.
Professional Voice Cloning — создание своей/ чьей-то вокальной модели. Самая важная функция, но только на платном. Требование к DS, как и в Weights.
Voice Blender — смешивание голосов, причем даже речевых и инструментов. На free — только из библ. Kits, на платном — и из своих моделей. Берём две*, задаем пропорцию, жмём [Blend], сообщает Merging (смешивание), сразу предлагает выполнить RVC**. Грузим трек, обращаем внимание на кн. [Acapella] [With Instruments]. Если acapella, то сделает RVC и выдаст только измененный вокал, а не песню с музыкой.
* Взял Male Modern Soul и Solo Saxophone 50/50%.
** Там еще есть множество полезных настроек (Vibrato, EQ, Delay, Reverb и др.), но всё на платном.
В примере: DS (мой кавер "I Just Called", S.Wonder)
1:48 — Male+Sax (50/50%)
2:19 — только Male Modern Soul
AH
00:11
Встречаем UVR online !
UVR online — еще один ресурс для разделения фонограмм. Всё обычно - ребята собрали готовые алгоритмы, интерфейс, подключили вычисл. мощности и зарабатывают. На free* аккаунте есть:
Музыка и вокал (весь)
Оставить бэки (voc и муз.+ бэки)
Извлечь бэки (voc, муз., бэки)
Бас и остальное
Ударные и ост.
Гитара и ост.
Саксофон и ост.
4 дорожки (Drums, Bass, Voc, ост.)
Эхо/реверб. и ост.
Звуки толпы и ост.
Реставрация (шум и ост.)
* проходит СБП оплата через boosty .to, связанного с UVR online. Минимум это 250 р./мес и 330 мин/нед.
Модели на free акк. работают вполне прилично, в частности, Извлечь бэки и Эхо/ реверб. (пробовал на сложном треке — "Wind of Change", Scorpions).
В день дается 12 мин., выход в mp3 320kb/s. Максимальная длительность — 8 мин., а на Извлечь бэки — 1 мин. (т.ч. придётся частями).
Важное:
❗Нет кн. "Пуск" — сначала выбрать тип, а потом грузить файл.
❗Результат (Акк. >Мои сборники >История) хранится недолго (4-5 час.) — лучше сразу скачивать.
❤
1
🔥
1
UVR online — еще один ресурс для разделения фонограмм. Всё обычно - ребята собрали готовые алгоритмы, интерфейс, подключили вычисл. мощности и зарабатывают. На free* аккаунте есть:
Музыка и вокал (весь)
Оставить бэки (voc и муз.+ бэки)
Извлечь бэки (voc, муз., бэки)
Бас и остальное
Ударные и ост.
Гитара и ост.
Саксофон и ост.
4 дорожки (Drums, Bass, Voc, ост.)
Эхо/реверб. и ост.
Звуки толпы и ост.
Реставрация (шум и ост.)
* проходит СБП оплата через boosty .to, связанного с UVR online. Минимум это 250 р./мес и 330 мин/нед.
Модели на free акк. работают вполне прилично, в частности, Извлечь бэки и Эхо/ реверб. (пробовал на сложном треке — "Wind of Change", Scorpions).
В день дается 12 мин., выход в mp3 320kb/s. Максимальная длительность — 8 мин., а на Извлечь бэки — 1 мин. (т.ч. придётся частями).
Важное:
❗Нет кн. "Пуск" — сначала выбрать тип, а потом грузить файл.
❗Результат (Акк. >Мои сборники >История) хранится недолго (4-5 час.) — лучше сразу скачивать.
AH
23:50
С годовщиной канала, друзья!
Всего вышло 108 постов (16 от Бориса 🤝). Цели канала — в закрепленном посте; там нет ничего о продвижении музыки и предложении услуг*. Комментарии не подключены, негативных реакций нет — зачем снижать настрой ("уныние — грех") и зря тратить время?
* Общаюсь с музыкантами, которых знаю давно. Если на меня выходят (были и персоны с нашего ТВ) — стараюсь научить их самих или их помощников. Некоторые запросы вдохновляют на эксперименты и новые посты — это ПЛЮС. Но какая радость работать над DS или песней с матом? Такое слали и это МИНУС.
Мы в новой реальности:
▫️Большие игроки переходят от конфронтации к сотрудничеству.
▫️ИИ-артисты подписывают контракты с лейблами.
▫️Функционал лидеров муз. ИИ всё больше удовлетворяет профессионалов (вроде более 50% уже используют).
▫️На free акк. в чем-то сокращаются возможности.
▫️Сервисы множатся, как грибы.
Сделал оглавление по темам за год — так удобнее, чем искать через поиск.
🔥
7
❤
6
Всего вышло 108 постов (16 от Бориса 🤝). Цели канала — в закрепленном посте; там нет ничего о продвижении музыки и предложении услуг*. Комментарии не подключены, негативных реакций нет — зачем снижать настрой ("уныние — грех") и зря тратить время?
* Общаюсь с музыкантами, которых знаю давно. Если на меня выходят (были и персоны с нашего ТВ) — стараюсь научить их самих или их помощников. Некоторые запросы вдохновляют на эксперименты и новые посты — это ПЛЮС. Но какая радость работать над DS или песней с матом? Такое слали и это МИНУС.
Мы в новой реальности:
▫️Большие игроки переходят от конфронтации к сотрудничеству.
▫️ИИ-артисты подписывают контракты с лейблами.
▫️Функционал лидеров муз. ИИ всё больше удовлетворяет профессионалов (вроде более 50% уже используют).
▫️На free акк. в чем-то сокращаются возможности.
▫️Сервисы множатся, как грибы.
Сделал оглавление по темам за год — так удобнее, чем искать через поиск.
AH
00:05
Сохрани ритмику, измени мелодию!
Реальная история: театр, пьеса, готовую музыку нарезали к действию по секундам. Спросили у автора разрешение — дорого. Нужна другая музыка, аналогичная по ритмике* и настрою. Опция Cover в Suno не подойдёт — мелодии сохраняются.
* Как-то имел похожую ситуацию с YouTube: записал видеоуроки для курса "Развитие чувства ритма" под зарубежные хиты — не пропускает. Пришлось сочинить своё в этом же темпе, гармонии и наложить (в видео голос был вместе с музыкой).
Честный способ — сочинить аналогичное по ритмике и стилю, и записать. Но это ещё дороже, да и дольше.
Нечестный, но по современным законам пока рабочий — изменить мелодию в исходной. Легче всего, разбивая на фрагменты по сетке и смещая их по тону (PitchShifting). Варварство, конечно, но ... Да и по Copyright известные пьесы без изменения не пройдут**.
** взял несколько примеров из моей обучающей игры "Музыкальная викторина" — почти для всех: "... audio matches existing work of art".
👍
1
🔥
1
Реальная история: театр, пьеса, готовую музыку нарезали к действию по секундам. Спросили у автора разрешение — дорого. Нужна другая музыка, аналогичная по ритмике* и настрою. Опция Cover в Suno не подойдёт — мелодии сохраняются.
* Как-то имел похожую ситуацию с YouTube: записал видеоуроки для курса "Развитие чувства ритма" под зарубежные хиты — не пропускает. Пришлось сочинить своё в этом же темпе, гармонии и наложить (в видео голос был вместе с музыкой).
Честный способ — сочинить аналогичное по ритмике и стилю, и записать. Но это ещё дороже, да и дольше.
Нечестный, но по современным законам пока рабочий — изменить мелодию в исходной. Легче всего, разбивая на фрагменты по сетке и смещая их по тону (PitchShifting). Варварство, конечно, но ... Да и по Copyright известные пьесы без изменения не пройдут**.
** взял несколько примеров из моей обучающей игры "Музыкальная викторина" — почти для всех: "... audio matches existing work of art".
AH
00:02
Никакой магии, просто морфинг!
Решил продолжить тему поста о гармоническом, ладовом (без изменения ритмики) морфинге* .
* трансформация, меняющая свойства объекта. Если из жёлтого в зелёный можно переходить с бесконечным числом промежуточных оттенков, то в музыке всё дискретно.
Ноты в партитуре это события, расположенные на сетке, где по X — время, а по Y — частота. Для перехода из 4/4 в 3/4 и из мажора в минор надо сместить ноты на новые места** (композиторы часто делают подобное). Изменение ритма можно сделать с помощью композиции линейных функций. С ладом, гармонией всё сложнее.
** Соблюдение музыкальных правил обязывает смещать ноты строго по сетке. На пути из 4/4 в 3/4 нет размера 3,5/4 (если только 7/8). Да и смещение нот на 1/4 тона гармонии не прибавит.
Ранее, разрабатывая алгоритмы морфинга, выполнил много тестов с MIDI. ИИ теперь позволяет "допилить" результат по звуку. Для этого поста сделал морфинг известных песен, а также освежил свои старые примеры.
👍
2
🔥
1
Решил продолжить тему поста о гармоническом, ладовом (без изменения ритмики) морфинге* .
* трансформация, меняющая свойства объекта. Если из жёлтого в зелёный можно переходить с бесконечным числом промежуточных оттенков, то в музыке всё дискретно.
Ноты в партитуре это события, расположенные на сетке, где по X — время, а по Y — частота. Для перехода из 4/4 в 3/4 и из мажора в минор надо сместить ноты на новые места** (композиторы часто делают подобное). Изменение ритма можно сделать с помощью композиции линейных функций. С ладом, гармонией всё сложнее.
** Соблюдение музыкальных правил обязывает смещать ноты строго по сетке. На пути из 4/4 в 3/4 нет размера 3,5/4 (если только 7/8). Да и смещение нот на 1/4 тона гармонии не прибавит.
Ранее, разрабатывая алгоритмы морфинга, выполнил много тестов с MIDI. ИИ теперь позволяет "допилить" результат по звуку. Для этого поста сделал морфинг известных песен, а также освежил свои старые примеры.
AH
00:02
Зайти в Suno с известной лирикой?
Каверы на известные песни делал редко, всего 3-4. Если песня/ Lyrics зарегистрированы, Suno отказывает в генерации: "Lyrics contained copyrighted material".
Есть негарантированные способы преодолеть запрет:
1. Невидимые символы.
2. Непроизносимые буквы.
3. Свой "левый" текст к основному.
4. Изменить текст, но не фонетику.
Для теста взял "I Just Called to Say I Love You" , S.Wonder. (IJC)
Невидимые символы.
Самые известные — "неразрывный перенос" и "табуляция". На IJC не сработало, Борис сказал, что Suno теперь их фильтрует. Но есть и другие — может, что-то сработает, я не проверял.
Непроизносимые буквы.
Например, ъ, ь — на IJC работает! Поставил всего по 2 буквы на строку:
ъ No New Year's ъ Day to celebrate
ъ No chocolate covered ъ candy hearts to give away
...
Похоже, эти буквы в англ. надо ставить так, когда ДО и ПОСЛЕ согласные, где есть естественное прерывание (гласные и назальные согласные часто сливаются).
👍
4
😱
1
Каверы на известные песни делал редко, всего 3-4. Если песня/ Lyrics зарегистрированы, Suno отказывает в генерации: "Lyrics contained copyrighted material".
Есть негарантированные способы преодолеть запрет:
1. Невидимые символы.
2. Непроизносимые буквы.
3. Свой "левый" текст к основному.
4. Изменить текст, но не фонетику.
Для теста взял "I Just Called to Say I Love You" , S.Wonder. (IJC)
Невидимые символы.
Самые известные — "неразрывный перенос" и "табуляция". На IJC не сработало, Борис сказал, что Suno теперь их фильтрует. Но есть и другие — может, что-то сработает, я не проверял.
Непроизносимые буквы.
Например, ъ, ь — на IJC работает! Поставил всего по 2 буквы на строку:
ъ No New Year's ъ Day to celebrate
ъ No chocolate covered ъ candy hearts to give away
...
Похоже, эти буквы в англ. надо ставить так, когда ДО и ПОСЛЕ согласные, где есть естественное прерывание (гласные и назальные согласные часто сливаются).
AH
00:06
Спросите ИИ за промпт!
Задача: создать виртуального артиста - генерить песни и менять тембр голоса (RVC) на свой. Если просто брать тексты и задавать жанр, то "исполнители" будут разными. Нужно сузить разброс: выбрать близкого по характеру певца и генерить в его манере, а для этого особым образом задавать стиль.
Уже много копий сломано на теме промптов, как получить именно то, что хочется. Текстом - жанр, поджанр, инструменты, вокал, манера, настроение ... через DS (Upload Audio). А ведь можно попросить ИИ! Вполне возможно, многие так и делают — я попробовал первый раз.
Попросил АлисаAI: "Привет, напиши на английском промпт для песен, музыки Билли Айлиш, описывая стиль, голос, но не указывая её имя."* Выдала 5 подробных (~360 символов) вариантов:
✔ Минималистичный поп-трек с мрачной атмосферой;
✔ Интимная баллада с электронной подложкой;
✔ Мрачный поп с элементами трип-хопа;
✔ Атмосферный трек с контрастной динамикой;
✔ Минималистичный трек с акцентом на текст.
* Указание имени в Suno не проходит.
👍
4
Задача: создать виртуального артиста - генерить песни и менять тембр голоса (RVC) на свой. Если просто брать тексты и задавать жанр, то "исполнители" будут разными. Нужно сузить разброс: выбрать близкого по характеру певца и генерить в его манере, а для этого особым образом задавать стиль.
Уже много копий сломано на теме промптов, как получить именно то, что хочется. Текстом - жанр, поджанр, инструменты, вокал, манера, настроение ... через DS (Upload Audio). А ведь можно попросить ИИ! Вполне возможно, многие так и делают — я попробовал первый раз.
Попросил АлисаAI: "Привет, напиши на английском промпт для песен, музыки Билли Айлиш, описывая стиль, голос, но не указывая её имя."* Выдала 5 подробных (~360 символов) вариантов:
✔ Минималистичный поп-трек с мрачной атмосферой;
✔ Интимная баллада с электронной подложкой;
✔ Мрачный поп с элементами трип-хопа;
✔ Атмосферный трек с контрастной динамикой;
✔ Минималистичный трек с акцентом на текст.
* Указание имени в Suno не проходит.
AH
00:07
Встречаем TUNEE !
Tunee — генерация от китайцев. Пишут, что на своей модели TemPolor, кто-то думает — Suno франшиза: звук, функции, русский похожи.
Задание — ч/з диалог (чего хочется) с Агентом, но можно, указав Style и Lyrics. Есть UI на русском. Проверил Upload Audio — работает! Но доп. параметров нет. Скачка — mp3, wav.
Схема тарифов похожа на Suno (27.11.2025), но цены выше. После регистрации — 50 бонусных кредитов. На free — 30 кр./день. Списание кр. гибкое, зависит от задачи. Из-за такой схемы на free: "примерно 6 диалогов, около 15 песен" (В мес.?). Расходы по первому тесту:
2 кр. — анализ файла (Upload Audio, DS 58 сек.);
2 кр. — анализ задачи;
2 кр. — планирование песни;
15 кр. — генерация.
Итого 21 кредит за генерацию 2-х треков (1:30 и 1:38) - Тест1 на DS c моим странным вокалом (RVC).
Basic план — $18/мес. Оплата — карты, Link, Alipay.
На платных вроде легко получить сертификат на комм. использование. Даже на ранее созданные на free, но оплачивая каждую песню.
🔥
7
❤
2
👍
2
Tunee — генерация от китайцев. Пишут, что на своей модели TemPolor, кто-то думает — Suno франшиза: звук, функции, русский похожи.
Задание — ч/з диалог (чего хочется) с Агентом, но можно, указав Style и Lyrics. Есть UI на русском. Проверил Upload Audio — работает! Но доп. параметров нет. Скачка — mp3, wav.
Схема тарифов похожа на Suno (27.11.2025), но цены выше. После регистрации — 50 бонусных кредитов. На free — 30 кр./день. Списание кр. гибкое, зависит от задачи. Из-за такой схемы на free: "примерно 6 диалогов, около 15 песен" (В мес.?). Расходы по первому тесту:
2 кр. — анализ файла (Upload Audio, DS 58 сек.);
2 кр. — анализ задачи;
2 кр. — планирование песни;
15 кр. — генерация.
Итого 21 кредит за генерацию 2-х треков (1:30 и 1:38) - Тест1 на DS c моим странным вокалом (RVC).
Basic план — $18/мес. Оплата — карты, Link, Alipay.
На платных вроде легко получить сертификат на комм. использование. Даже на ранее созданные на free, но оплачивая каждую песню.
AH
00:02
Рик о транслитерации
Получил комментарий от Рика Пола* на треки "Stumblin' In", "Hotel California", где английский частично был прописан кириллицей. Как и предполагал, там появился русский акцент, ну и некоторые "косяки" с ритмикой из-за морфинга.
🔥
3
Получил комментарий от Рика Пола* на треки "Stumblin' In", "Hotel California", где английский частично был прописан кириллицей. Как и предполагал, там появился русский акцент, ну и некоторые "косяки" с ритмикой из-за морфинга.
Алекс, ... в песне «Stumbling In» одна из ключевых проблем — неправильное произношение слова «stumbling»: оно должно состоять из трёх слогов («STUM‑ble‑ing» или, с разговорным акцентом, «STUM‑ble‑in»). Часть «ble» напоминает слово «bull», но менее протяжно.
При прослушивании MP3‑файлов заметил: женский голос в «Stumbling In» местами выдаёт акцент, хотя в начале песни это не так очевидно; мужской голос звучит с явным русским акцентом — как и в «Hotel California».
Главный признак русского акцента — произношение «w» как «v» (как у немцев, которые «v» произносят как «f») и «th» как «z». В записях это непоследовательно: иногда верно, иногда нет, но мужской голос более стабилен.
AH
00:02
Маккинли о транслитерации
Ещё один комментарий на треки "Stumblin' In" и"Hotel California", где я часть английских слов прописал кириллицей. Маккинли Хиббитс* подтвердил, что местами есть русский акцент, а также нарушения ритмики из-за морфинга.
❤
1
🔥
1
Ещё один комментарий на треки "Stumblin' In" и"Hotel California", где я часть английских слов прописал кириллицей. Маккинли Хиббитс* подтвердил, что местами есть русский акцент, а также нарушения ритмики из-за морфинга.
Спасибо, что поделился этим; это увлекательный обходной путь. Использование транслитерации кириллицы для обхода фильтров авторских прав — это разумное решение. Ты прав, подозревая, что этот метод приведёт к появлению акцента: даже при схожей фонетике синтезатор, вероятно, обрабатывает кириллические строки через русскую фонологическую модель, налагая свои просодические правила (ударения, редукцию гласных и т. д.) на предполагаемый английский текст.
AH
00:21
Сделать минусовку с Tunee?
Это сериал, детектив! Неделю "пытал" Агента Tunee, чтобы из песни от Suno v4.5 получить минусовку (то, что ранее тестировал с Suno).
День 1.
AU: Делаю Split (Voc/Inst), загружаю инструментал целиком (тут нет ограничения, как у Suno на free). Пишу* Агенту: "Референс-трек — это минусовка, ... надо улучшить качество звука, не меняя структуру, темп, key, инструменты".
Tn: Описывает трек и предлагает 4 опции:
— Balanced Studio Polish
— Cinematic Depth Upgrade
— Modern Warm Enhancement
— I want all directions
AU: Выбираю первую.
Tn: Балаболит, выдает промпт: "Cinematic Instrumental, violin, clean electric guitar, ambient pads, subtle drums, reflective, warm, moderate groove, spacious production" и генерит.
AU: Вкусно, по звуку вроде Suno v4.5, но это не минус, а инструментал! Море соло добавилось в Verse/ Chorus. Ну ... и сожрал 17 кредитов. (2 — анализ, 15 — генерация). Жду обновления (тут в 00:00 Мск).
* Тексты здесь сокращаю... и диалог был на En.
Это сериал, детектив! Неделю "пытал" Агента Tunee, чтобы из песни от Suno v4.5 получить минусовку (то, что ранее тестировал с Suno).
День 1.
AU: Делаю Split (Voc/Inst), загружаю инструментал целиком (тут нет ограничения, как у Suno на free). Пишу* Агенту: "Референс-трек — это минусовка, ... надо улучшить качество звука, не меняя структуру, темп, key, инструменты".
Tn: Описывает трек и предлагает 4 опции:
— Balanced Studio Polish
— Cinematic Depth Upgrade
— Modern Warm Enhancement
— I want all directions
AU: Выбираю первую.
Tn: Балаболит, выдает промпт: "Cinematic Instrumental, violin, clean electric guitar, ambient pads, subtle drums, reflective, warm, moderate groove, spacious production" и генерит.
AU: Вкусно, по звуку вроде Suno v4.5, но это не минус, а инструментал! Море соло добавилось в Verse/ Chorus. Ну ... и сожрал 17 кредитов. (2 — анализ, 15 — генерация). Жду обновления (тут в 00:00 Мск).
* Тексты здесь сокращаю... и диалог был на En.
AH
00:02
Часто задаваемые вопросы
Получаю 1-2 вопроса в неделю — кажется, стоит ответить в общем виде. Ощущаю себя инструктором автошколы, приезжающим на Запорожце, когда курсанты на геликах/ бэхах — у многих платные акк.😊.
Настоящий музыкант много слушает, учился, обучается, выступает/ сочиняет. Настоящий звукарь, студиец обновляет ПО, аппаратуру, изучает новинки и "фишки". К ним не отношусь, но знаком.
Занимался муз. железом, ПО, музыкальной акустикой, психологией восприятия, т.ч. скорее толмач между ними. Как инженеру, интересно, как ВСЁ это работает. Возможно, чуть лучше знаю фундамент/ базу, готов делиться, но за нюансами стоит обращаться к профессионалам. Чтобы детально отвечать о муз. ИИ, нужна команда — сервисы множатся, функционал меняется.
Стараюсь подсказать, как решать задачу, но не берусь за исполнение. Причины:
▫Результат с ИИ негарантированный.
▫Если человек не в теме, то обсуждение задачи на 2 ч. занимает неделю. Музыка очень разная, и с кем работал 15 лет, понимание есть не всегда.
🔥
1
Получаю 1-2 вопроса в неделю — кажется, стоит ответить в общем виде. Ощущаю себя инструктором автошколы, приезжающим на Запорожце, когда курсанты на геликах/ бэхах — у многих платные акк.😊.
Настоящий музыкант много слушает, учился, обучается, выступает/ сочиняет. Настоящий звукарь, студиец обновляет ПО, аппаратуру, изучает новинки и "фишки". К ним не отношусь, но знаком.
Занимался муз. железом, ПО, музыкальной акустикой, психологией восприятия, т.ч. скорее толмач между ними. Как инженеру, интересно, как ВСЁ это работает. Возможно, чуть лучше знаю фундамент/ базу, готов делиться, но за нюансами стоит обращаться к профессионалам. Чтобы детально отвечать о муз. ИИ, нужна команда — сервисы множатся, функционал меняется.
Стараюсь подсказать, как решать задачу, но не берусь за исполнение. Причины:
▫Результат с ИИ негарантированный.
▫Если человек не в теме, то обсуждение задачи на 2 ч. занимает неделю. Музыка очень разная, и с кем работал 15 лет, понимание есть не всегда.
AH
00:02
Часто задаваемые вопросы. # 13,14
В продолжение поста. Начну с интересного 😊.
Q13. Нужно убрать нецензурное (англ.) из треков для Hip-Hop конкурса*.
* Сочинская подростковая команда собралась в Москву, а трек "Go Down Deh (feat. Shaggy and Sean Paul)" не прошёл комиссию.
Можно заменить текст в Riffusion (Swap Vocal) или в Suno/ Tunee сделать кавер. Если не идёт по Copyright при транскрибации текста — перепутать фразы (порезать, переставить в DAW). Если по музыке — поменять форму (вырезать характерные Intro, Bridge), изменить темп (на 15-20%), правда потом всё придётся возвращать. Это показалось долгим — решил поработать с вокалом иначе и изменённый вокал смешать с исходной музыкой:
▫Split (Voc/Instr);
▫Реверс фрагментов длиной в 2(4) такта;
▫Поднял некоторые части на 7 полутонов (PitchShift), чтобы добавить "детские" голоса.
▫Где-то чуть подвигал по сетке (1/4).
Оказалось, что и задом наперёд звучит, и танцорам годится. См. трек №1 ниже.
👍
3
В продолжение поста. Начну с интересного 😊.
Q13. Нужно убрать нецензурное (англ.) из треков для Hip-Hop конкурса*.
* Сочинская подростковая команда собралась в Москву, а трек "Go Down Deh (feat. Shaggy and Sean Paul)" не прошёл комиссию.
Можно заменить текст в Riffusion (Swap Vocal) или в Suno/ Tunee сделать кавер. Если не идёт по Copyright при транскрибации текста — перепутать фразы (порезать, переставить в DAW). Если по музыке — поменять форму (вырезать характерные Intro, Bridge), изменить темп (на 15-20%), правда потом всё придётся возвращать. Это показалось долгим — решил поработать с вокалом иначе и изменённый вокал смешать с исходной музыкой:
▫Split (Voc/Instr);
▫Реверс фрагментов длиной в 2(4) такта;
▫Поднял некоторые части на 7 полутонов (PitchShift), чтобы добавить "детские" голоса.
▫Где-то чуть подвигал по сетке (1/4).
Оказалось, что и задом наперёд звучит, и танцорам годится. См. трек №1 ниже.
00:20
Tunee: диалог — бесплатно. Параметры?
Появилась идея расспросить Агента о параметрах, как в Suno с опцией Cover. У Tunee наверняка должно быть что-то подобное «под капотом». Состоялся диалог (приятный момент — за разговор кредиты не списываются 😀).
AU: «Могу использовать параметры Weirdness, Style / Audio influence, ты будешь их учитывать?»
Tn: «Да, я буду учитывать Weirdness, Style / Audio influence… просто укажите значения…»
AU: «Значит я могу указать «Weirdness = 15%, Style influence = 50%, Audio influence = 90%»?»
Tn: «Именно так! Дайте эталонный файл… буду интерпретировать значения... музыкально, а не строго математически...»
ОК (можно подумать, что Suno интерпретирует их строго 😀).
Взял тот же DS (RitaHB – mp3 из простого MIDI), кот. пробовал в прошлый раз. Тогда не знал, что можно задать параметры и генерация была очень далека от референс-трека.
Вдохновленный, написал задание, перевел на англ. и послал Агенту:
❤
1
👍
1
Появилась идея расспросить Агента о параметрах, как в Suno с опцией Cover. У Tunee наверняка должно быть что-то подобное «под капотом». Состоялся диалог (приятный момент — за разговор кредиты не списываются 😀).
AU: «Могу использовать параметры Weirdness, Style / Audio influence, ты будешь их учитывать?»
Tn: «Да, я буду учитывать Weirdness, Style / Audio influence… просто укажите значения…»
AU: «Значит я могу указать «Weirdness = 15%, Style influence = 50%, Audio influence = 90%»?»
Tn: «Именно так! Дайте эталонный файл… буду интерпретировать значения... музыкально, а не строго математически...»
ОК (можно подумать, что Suno интерпретирует их строго 😀).
Взял тот же DS (RitaHB – mp3 из простого MIDI), кот. пробовал в прошлый раз. Тогда не знал, что можно задать параметры и генерация была очень далека от референс-трека.
Вдохновленный, написал задание, перевел на англ. и послал Агенту:
AH
00:22
Часто задаваемые вопросы: # 3,4,5 — продолжение поста
Q3. Исполняем джаз, минусовки ужасные, нужна реставрация старых записей.
В джазе для одной композиции может существовать множество версий. Исполнители к этому привыкли, и изменение* минуса принимается легко. Иногда так: «Вау, у нас своя версия!».
В Suno (Cover) обновление вполне реально, но повозиться придётся:
1. Split (Voc/ Inst).
2. На Inst. сделать несколько Cover. Внимание на параметры (Weirdness, Style/ Audio influence) и Style (хотя удачной может быть и генерация с пустым).
3. В DAW загрузить DS и хорошие версии — смотреть, как выдержана форма.
4. Собрать из удачных кусков композицию точно по форме DS:
- Темп может отличаться — сжать/ растянуть фрагменты;
- Внимание на стыковки;
- Если в Verse/ Chorus лишние соло — сделать пофрагментно Split (Wind/ Other и т.п.) и соединить, уменьшая уровень соло;
- Подправить спектр, если есть явный разброс во фрагментах.
* Если нужны другая форма, Key, BPM — надо сначала пересобрать DS, потом делать каверы.
Q3. Исполняем джаз, минусовки ужасные, нужна реставрация старых записей.
В джазе для одной композиции может существовать множество версий. Исполнители к этому привыкли, и изменение* минуса принимается легко. Иногда так: «Вау, у нас своя версия!».
В Suno (Cover) обновление вполне реально, но повозиться придётся:
1. Split (Voc/ Inst).
2. На Inst. сделать несколько Cover. Внимание на параметры (Weirdness, Style/ Audio influence) и Style (хотя удачной может быть и генерация с пустым).
3. В DAW загрузить DS и хорошие версии — смотреть, как выдержана форма.
4. Собрать из удачных кусков композицию точно по форме DS:
- Темп может отличаться — сжать/ растянуть фрагменты;
- Внимание на стыковки;
- Если в Verse/ Chorus лишние соло — сделать пофрагментно Split (Wind/ Other и т.п.) и соединить, уменьшая уровень соло;
- Подправить спектр, если есть явный разброс во фрагментах.
* Если нужны другая форма, Key, BPM — надо сначала пересобрать DS, потом делать каверы.
AH
01:37
Найди верный стиль своей песни!
Тема только на первый взгляд выглядит странной. Разве автор текста, аранжировщик, пользователь ИИ не представляет характер будущей песни? У каждого есть любимые исполнители, стиль и, наверное, "видение" нового трека.
У меня тоже свои "любимки", но когда начал эксперименты с Suno, пробовал множество стилей — интересно! На один текст было ~12 версий (отсюда идея "альбом одной песни"). Многие нравились, помещал на сайт, видно, более всеяден 😀.
Стал обращаться к друзьям за текстами и обнаружил, что автор часто:
- не может указать стиль. Знакомая: "Хочу настоящий рок". Сделал 10 версий, но она выбрала Emo;
- принимает стиль, который сам бы никогда не выбрал: "Неожиданно, совсем другое настроение! "
Ключевой момент — цель: реализовать своё видение или получить успех у слушателя?
Повторяющийся сюжет: артист добивается известности и делает своё, а не по заданию продюсера, но публика любит его другого: из 1 млн CD "The Secret Life of Plants" С.Уандера (1979) было продано ~10%.
Тема только на первый взгляд выглядит странной. Разве автор текста, аранжировщик, пользователь ИИ не представляет характер будущей песни? У каждого есть любимые исполнители, стиль и, наверное, "видение" нового трека.
У меня тоже свои "любимки", но когда начал эксперименты с Suno, пробовал множество стилей — интересно! На один текст было ~12 версий (отсюда идея "альбом одной песни"). Многие нравились, помещал на сайт, видно, более всеяден 😀.
Стал обращаться к друзьям за текстами и обнаружил, что автор часто:
- не может указать стиль. Знакомая: "Хочу настоящий рок". Сделал 10 версий, но она выбрала Emo;
- принимает стиль, который сам бы никогда не выбрал: "Неожиданно, совсем другое настроение! "
Ключевой момент — цель: реализовать своё видение или получить успех у слушателя?
Повторяющийся сюжет: артист добивается известности и делает своё, а не по заданию продюсера, но публика любит его другого: из 1 млн CD "The Secret Life of Plants" С.Уандера (1979) было продано ~10%.
AH
00:13
SongCompare — браузерное десктоп- приложение для сравнения песен.
Недавно пришлось собирать минус из 40! каверов (Suno/ Tunee). Обычно сваливаю всё в Reaper: слушать, резать, клеить, помечать прямо в имени трека, вроде "5+, bad, Solo!" и т.п. Места там мало, поэтому даю трекам короткие имена:
RwM-128CtB-Tn-305080-4b Sax (песня, DS, Tunee, параметры, вариант, инструмент).
Но всё в DAW не пропишешь — пробовал таблицу (Word, OpenOffice) — не удобно.
... написал приложение, чтобы слушать, сортировать, ставить оценки по параметрам (Vocal, Words, Melody, Harmony...), делать комментарии и сохранять таблицу в PDF.
Думаю, оно будет полезным как для выбора вариантов, так и для получения обратной связи: послали треки другу — он вернул таблицу с оценками. На сервер треки не грузятся — всё в вашем браузере, т.е. конфиденциально❗
Определяется RMS, вручную — темп (BPM) и тональность (Key). Библиотеки подключать пока не стал + это развивает высотный слух и чувство ритма. Видео ещё не записал, вот хелп ❄🎄🍾
👍
14
🤔
1
Недавно пришлось собирать минус из 40! каверов (Suno/ Tunee). Обычно сваливаю всё в Reaper: слушать, резать, клеить, помечать прямо в имени трека, вроде "5+, bad, Solo!" и т.п. Места там мало, поэтому даю трекам короткие имена:
RwM-128CtB-Tn-305080-4b Sax (песня, DS, Tunee, параметры, вариант, инструмент).
Но всё в DAW не пропишешь — пробовал таблицу (Word, OpenOffice) — не удобно.
... написал приложение, чтобы слушать, сортировать, ставить оценки по параметрам (Vocal, Words, Melody, Harmony...), делать комментарии и сохранять таблицу в PDF.
Думаю, оно будет полезным как для выбора вариантов, так и для получения обратной связи: послали треки другу — он вернул таблицу с оценками. На сервер треки не грузятся — всё в вашем браузере, т.е. конфиденциально❗
Определяется RMS, вручную — темп (BPM) и тональность (Key). Библиотеки подключать пока не стал + это развивает высотный слух и чувство ритма. Видео ещё не записал, вот хелп ❄🎄🍾
AH
AH
00:07
Часто задаваемые вопросы: #1,2,7,8,10 — продолжение поста.
Эти по сути о замене тембра (RVC). Постов по теме уже было несколько: 11, 34, 40, 418, 622.
Q1. Сочинил(а) песню, хочу показать известной певице, нужно женским, а лучше с её голосом.
Супер идея, если с певицей знакомы, а то и конфликт случится, ведь взяли голос без спроса. Важное:
а) Нужна качественная голосовая модель. Вряд ли можно найти хорошую — то, что в сети, скорее натренировано на "разделёнке" (vocalRemover), а не на студийных dry треках.
б) Референс-трек (вокал, где тембр надо заменить) по манере, регистру должен быть максимально близок к певице. С этим проще, но*.
В случае М в Ж могут возникнуть моменты с регистром. Если М — баритон, то подъем на октаву (12 п.т.) может сработать, и минус можно не менять (что не совсем правильно). Если тенор, то подъём на 6-9 п.т., и минус нужен другой.
* Вначале думал — с RVC смогу делать Ж песни, но манеру не спрячешь! Одна дама: "Лёша, слышно же, что ты пел" 😀. См. примеры.
🔥
4
Эти по сути о замене тембра (RVC). Постов по теме уже было несколько: 11, 34, 40, 418, 622.
Q1. Сочинил(а) песню, хочу показать известной певице, нужно женским, а лучше с её голосом.
Супер идея, если с певицей знакомы, а то и конфликт случится, ведь взяли голос без спроса. Важное:
а) Нужна качественная голосовая модель. Вряд ли можно найти хорошую — то, что в сети, скорее натренировано на "разделёнке" (vocalRemover), а не на студийных dry треках.
б) Референс-трек (вокал, где тембр надо заменить) по манере, регистру должен быть максимально близок к певице. С этим проще, но*.
В случае М в Ж могут возникнуть моменты с регистром. Если М — баритон, то подъем на октаву (12 п.т.) может сработать, и минус можно не менять (что не совсем правильно). Если тенор, то подъём на 6-9 п.т., и минус нужен другой.
* Вначале думал — с RVC смогу делать Ж песни, но манеру не спрячешь! Одна дама: "Лёша, слышно же, что ты пел" 😀. См. примеры.
AH
12:59
Творчество или коммерция?
С появлением музыкального ИИ творить стали многие любители и реальные знатоки музыки, музыкантами не являющиеся, — те, кто сами не играют и не поют. Некоторые решили, что на этом можно заработать. Эта идея сродни той, что возникает у людей, которые "не в теме". Вот спел товарищ в гостях под гитару, пианино, как другие не могут, — тут же вопрос-предложение: "А что ты в ресторане не поёшь?" В студенческие годы я играл и в ресторане, и на танцплощадке, и хорошо понимаю разницу между хобби и профессией.
Как сейчас вижу, заработать с ИИ получается у знакомых не очень — почти все опустили руки. Почему? В памяти всплыли две истории.
1) В 1976-м, после 1-го курса НЭТИ (НГТУ), приехал к родителям (г. Усолье-Сибирское) и встретился с гитаристом школьной рок-группы (после выпускного он уехал на Дальний Восток).
Он: "Лёха, зачем тебе институт? Давай к нам."
Я: "А там город большой?"
Он: "15 тысяч, но с каждого не по копейке, по рублю! А за такие деньги я готов играть и по колено в д..."
С появлением музыкального ИИ творить стали многие любители и реальные знатоки музыки, музыкантами не являющиеся, — те, кто сами не играют и не поют. Некоторые решили, что на этом можно заработать. Эта идея сродни той, что возникает у людей, которые "не в теме". Вот спел товарищ в гостях под гитару, пианино, как другие не могут, — тут же вопрос-предложение: "А что ты в ресторане не поёшь?" В студенческие годы я играл и в ресторане, и на танцплощадке, и хорошо понимаю разницу между хобби и профессией.
Как сейчас вижу, заработать с ИИ получается у знакомых не очень — почти все опустили руки. Почему? В памяти всплыли две истории.
1) В 1976-м, после 1-го курса НЭТИ (НГТУ), приехал к родителям (г. Усолье-Сибирское) и встретился с гитаристом школьной рок-группы (после выпускного он уехал на Дальний Восток).
Он: "Лёха, зачем тебе институт? Давай к нам."
Я: "А там город большой?"
Он: "15 тысяч, но с каждого не по копейке, по рублю! А за такие деньги я готов играть и по колено в д..."
AH
00:00
Часто задаваемые вопросы: #6,9 — продолжение поста.
Q6. Пою песни от Suno под минус, нужно подправить голос и свести.
Если речь о тюнинге (правке нот по тону и ритмике), то занимался подобным очень много, также и со сгенерированными треками. Но всё для знакомых, с которыми работаю давно. Подобные операции выполнят в любой студии и даже дистанционно. Голос можно записать и на телефон, только аккуратно и используя приложение, не вносящее заметную обработку — сохраняющее запись в *.wav, *.aac или *.flac.
Если используете DAW, в которой есть запись "по петле", то лучше записывать частями. Например, 1-й куплет + 1-й припев — получится несколько версий, затем следующий фрагмент. Далее сохранить проект полностью (со всеми файлами) и отправить в студию.
Также в студию стоит отправить неразделённый (Voc/Instr) исходный трек: а) возможно, ребята разделят его лучше; б) они смогут посмотреть, какой вокал был в оригинале.
У меня на сайте есть материалы:
"Рекомендации вокалистам".
"Дистанционная запись и студия".
👍
4
Q6. Пою песни от Suno под минус, нужно подправить голос и свести.
Если речь о тюнинге (правке нот по тону и ритмике), то занимался подобным очень много, также и со сгенерированными треками. Но всё для знакомых, с которыми работаю давно. Подобные операции выполнят в любой студии и даже дистанционно. Голос можно записать и на телефон, только аккуратно и используя приложение, не вносящее заметную обработку — сохраняющее запись в *.wav, *.aac или *.flac.
Если используете DAW, в которой есть запись "по петле", то лучше записывать частями. Например, 1-й куплет + 1-й припев — получится несколько версий, затем следующий фрагмент. Далее сохранить проект полностью (со всеми файлами) и отправить в студию.
Также в студию стоит отправить неразделённый (Voc/Instr) исходный трек: а) возможно, ребята разделят его лучше; б) они смогут посмотреть, какой вокал был в оригинале.
У меня на сайте есть материалы:
"Рекомендации вокалистам".
"Дистанционная запись и студия".
AH
15:49
Почему музыка ИИ человеческая и новая без нового?
— название моей новой статьи, опубликованной на Хабре.
2025-й — знаковый для музыкальной индустрии: ИИ-артисты «подписывают» контракты, основатели «Грэмми» не против ИИ, лидеры (Suno/ Udio) становятся законопослушными, народу в целом всё-равно (большинство не различает ИИ-треки). Революция свершилась, о чём ещё спорить? Но … вот две реплики из форумов:
В ИИ-музыке нет души.
Музыкальный ИИ развивается неправильно.
Попытался осветить вопросы: природа музыки, выразительные средства, слабость западноевропейской теории музыки, особенности восприятия, новации в музыке, особенности ИИ генерации, смысл моделирования всего и вся.
Кратко:
▫️Артист далеко не всегда поёт с душой — «душа» на стороне слушателя;
▫️Только с ИИ «музыка из железки» стала человеческой — ранее исполнительские нюансы так не воспроизводились;
▫️Да, песни новые, но без музыкальных новаций — всё на базе уже придуманного, опробованного человеком;
▫️Число генераций из одной модели ограничено.
👍
12
❤
3
👏
2
— название моей новой статьи, опубликованной на Хабре.
2025-й — знаковый для музыкальной индустрии: ИИ-артисты «подписывают» контракты, основатели «Грэмми» не против ИИ, лидеры (Suno/ Udio) становятся законопослушными, народу в целом всё-равно (большинство не различает ИИ-треки). Революция свершилась, о чём ещё спорить? Но … вот две реплики из форумов:
В ИИ-музыке нет души.
Музыкальный ИИ развивается неправильно.
Попытался осветить вопросы: природа музыки, выразительные средства, слабость западноевропейской теории музыки, особенности восприятия, новации в музыке, особенности ИИ генерации, смысл моделирования всего и вся.
Кратко:
▫️Артист далеко не всегда поёт с душой — «душа» на стороне слушателя;
▫️Только с ИИ «музыка из железки» стала человеческой — ранее исполнительские нюансы так не воспроизводились;
▫️Да, песни новые, но без музыкальных новаций — всё на базе уже придуманного, опробованного человеком;
▫️Число генераций из одной модели ограничено.
AH
00:01
А с акцентом споёшь?
Тут приятель попросил песню супруге на Д.Р. с известным голосом. Я сказал, что с нашими певцами делать не буду, а с иностранными готов. Где? В Sonauto! Для меня Sonauto — это:
▫️Генерации с голосами известных* (см. L1, L2, L3);
▫️Похоже, скромный (и странный) DS для тренировки их модели;
▫️Ограниченная (до v3) длина трека;
▫️Странные генерации при явном несовпадении артиста со стилем;
▫️Косяки с русским языком.
* до сих пор не знаю, как к этому относиться. Вроде, нехорошо? ОК, только для себя. Однако, всегда же были пародисты, которые, обучившись на образцах, имитировали артистов, да ещё получали вознаграждение. Что, кто-то брал разрешение, чтобы кого-то пародировать? Если результат не оскорбляет персону, это, наверное, можно воспринимать как признание таланта.
Рассчитывая на узнаваемость, сделал товарищу с текстом на русском А.Челентано, Стинга, Э.Рамазотти. Примеры с изменённым текстом — ниже.
👍
4
🔥
2
Тут приятель попросил песню супруге на Д.Р. с известным голосом. Я сказал, что с нашими певцами делать не буду, а с иностранными готов. Где? В Sonauto! Для меня Sonauto — это:
▫️Генерации с голосами известных* (см. L1, L2, L3);
▫️Похоже, скромный (и странный) DS для тренировки их модели;
▫️Ограниченная (до v3) длина трека;
▫️Странные генерации при явном несовпадении артиста со стилем;
▫️Косяки с русским языком.
* до сих пор не знаю, как к этому относиться. Вроде, нехорошо? ОК, только для себя. Однако, всегда же были пародисты, которые, обучившись на образцах, имитировали артистов, да ещё получали вознаграждение. Что, кто-то брал разрешение, чтобы кого-то пародировать? Если результат не оскорбляет персону, это, наверное, можно воспринимать как признание таланта.
Рассчитывая на узнаваемость, сделал товарищу с текстом на русском А.Челентано, Стинга, Э.Рамазотти. Примеры с изменённым текстом — ниже.
AH
00:01
Они растут как грибы!
Понемногу теряю настрой смотреть все сервисы по теме муз. ИИ — они множатся, как... Делюсь очередным "прозвоном" (не уверен, что всё заметил). Большинство "наших" — перепродажа Suno. Всё как в общепите: есть один комбинат, выдающий оптом по заказу, есть дилеры. Каждый имеет доступ к полному меню (версии, опции) и решает:
▫️как оформлять витрину (сайт/ бот);
▫️что клиент может заказать;
▫️какие цены, скидки.
Полная свобода :
▫️Кто-то честно пишет "Suno", др. — "наш генератор".
▫️Одни указывают версию (v3.5 ... v5), др. — "Улучшенная", "Устаревшая" или свои (v2.6, v3.2).
▫️Где-то лучше UI, например, задание Style ч/з имя артиста или атмосферу ("Вечерний Релакс").
▫️По-разному оформляют и хранят генерации: где-то можно назвать, где-то просто код; одни прописывают теги (стиль, например), др. — нет; у одних только mp3, др. отдают и wav.
▫️Одни открыты (ИП, оферта, реквизиты, тел., email), др. — анонимы.
У многих есть "сопутствующие товары": auto-Lyrics, split, stems, видео и др.
🔥
3
❤
1
👏
1
😁
1
Понемногу теряю настрой смотреть все сервисы по теме муз. ИИ — они множатся, как... Делюсь очередным "прозвоном" (не уверен, что всё заметил). Большинство "наших" — перепродажа Suno. Всё как в общепите: есть один комбинат, выдающий оптом по заказу, есть дилеры. Каждый имеет доступ к полному меню (версии, опции) и решает:
▫️как оформлять витрину (сайт/ бот);
▫️что клиент может заказать;
▫️какие цены, скидки.
Полная свобода :
▫️Кто-то честно пишет "Suno", др. — "наш генератор".
▫️Одни указывают версию (v3.5 ... v5), др. — "Улучшенная", "Устаревшая" или свои (v2.6, v3.2).
▫️Где-то лучше UI, например, задание Style ч/з имя артиста или атмосферу ("Вечерний Релакс").
▫️По-разному оформляют и хранят генерации: где-то можно назвать, где-то просто код; одни прописывают теги (стиль, например), др. — нет; у одних только mp3, др. отдают и wav.
▫️Одни открыты (ИП, оферта, реквизиты, тел., email), др. — анонимы.
У многих есть "сопутствующие товары": auto-Lyrics, split, stems, видео и др.
AH
00:04
Suno: Persona — это ... ?
Вопрос в связи с генерацией со "своим голосом". Когда Persona только появилась, слышал, что не очень похоже. Сам потестил на днях.
Комментарий Suno о Persona: "... сохранить суть песни — её вокал, стиль и т. д., и использовать её для новых песен". Логично было бы загрузить образец и сделать из него персону, однако: "Создание персоны из Audio Upload недоступны в данный момент". ОК, пробую в v5:
▫️гружу референс-трек (DS);
▫️делаю кавер (текст тот же) с парам. 00,00,80 (Weirdness, Style / Audio influence) — т.е. с макс. влиянием DS;
▫️из кавера делаю Persona;
▫️генерю (новый текст) с Persona (Style пустой или song).
Взял известные голоса (Sonauto!) и свой. На каждом этапе брал трек, где голос меньше изменился. Однако, тембр перестаёт быть узнаваемым и становится "общим" — каждая копия* дальше от оригинала 🥲. Т.ч. лучше прямо из DS.
Ниже примеры, в каждом: DS → Cover → NewSong (по 30 сек.).
Вопрос в связи с генерацией со "своим голосом". Когда Persona только появилась, слышал, что не очень похоже. Сам потестил на днях.
Комментарий Suno о Persona: "... сохранить суть песни — её вокал, стиль и т. д., и использовать её для новых песен". Логично было бы загрузить образец и сделать из него персону, однако: "Создание персоны из Audio Upload недоступны в данный момент". ОК, пробую в v5:
▫️гружу референс-трек (DS);
▫️делаю кавер (текст тот же) с парам. 00,00,80 (Weirdness, Style / Audio influence) — т.е. с макс. влиянием DS;
▫️из кавера делаю Persona;
▫️генерю (новый текст) с Persona (Style пустой или song).
Взял известные голоса (Sonauto!) и свой. На каждом этапе брал трек, где голос меньше изменился. Однако, тембр перестаёт быть узнаваемым и становится "общим" — каждая копия* дальше от оригинала 🥲. Т.ч. лучше прямо из DS.
Ниже примеры, в каждом: DS → Cover → NewSong (по 30 сек.).
AH
10:33
Что нового?
▪️Weights закрывается 🥲. Кто не успел забрать свои треки, модели — надо поторопиться. Для RVC полезно скачать Replay — последнюю версию и v6.2.0 (кот. тренирует модели).
▪️Tunee теперь предлагает разные модели: ACE-Step 1.5, HeartMuLa 3B, MiniMax 2.0/2.5, Mureka O2/7.5/7.6/8, Tempolor i3/4.5. Запустили тестирование Virtual Artist (не пробовал). А с кредитами у них часто криво — творческие ребята 😕.
▪️HeartMula — новый игрок с хорошей генерацией, открытый код — скорее всего можно запустить на своём ПК, организовать сервис. Не знаю, можно ли тренировать на своём DS и сделать свою модель.
▪️AI Song Marker — интегратор (Suno, ACE-step, Musicgen, DiffRhythm, Riffusion). Очень интересная опция (free) MP3 в MIDI. Протестил на паре треков — весьма прилично.
▪️Если Telegram таки ограничат, не знаю пока, где продолжить данный канал. В любом случае, буду что-то выкладывать на сайте.
👍
11
🔥
4
▪️Weights закрывается 🥲. Кто не успел забрать свои треки, модели — надо поторопиться. Для RVC полезно скачать Replay — последнюю версию и v6.2.0 (кот. тренирует модели).
▪️Tunee теперь предлагает разные модели: ACE-Step 1.5, HeartMuLa 3B, MiniMax 2.0/2.5, Mureka O2/7.5/7.6/8, Tempolor i3/4.5. Запустили тестирование Virtual Artist (не пробовал). А с кредитами у них часто криво — творческие ребята 😕.
▪️HeartMula — новый игрок с хорошей генерацией, открытый код — скорее всего можно запустить на своём ПК, организовать сервис. Не знаю, можно ли тренировать на своём DS и сделать свою модель.
▪️AI Song Marker — интегратор (Suno, ACE-step, Musicgen, DiffRhythm, Riffusion). Очень интересная опция (free) MP3 в MIDI. Протестил на паре треков — весьма прилично.
▪️Если Telegram таки ограничат, не знаю пока, где продолжить данный канал. В любом случае, буду что-то выкладывать на сайте.