Как я создаю музыку?

Фото артиста

Автор - Cristie

Начнем наше путешествие?
Привет, мой дорогой слушатель! Поговорим про звук? Вообще эта статья не просто про звук и как я создаю музыку, это про процесс, историю, мысли, философию. С чего начать? Давай начнем с того, с чего начинается любой звук, а точнее то что идёт до него. Это идея, каждый трек это мои мысли, эмоции, попытка передать их, выгрузить из себя и записать в музыку, любыми способами. Тут у нас начинаются прыжки по стилям, я не хочу себя ограничивать, в моей голове хаос в плане идей, поэтому я прыгаю от трип-хопа до индастриала, дабстепа и просто поп музыки. По текстам тоже самое, я люблю выгружать эмоции и у меня получаются меланхоличные треки, но также я люблю драйв и треш, поэтому рождаются треки вроде Трупиков и Пеннивайза, а ещё я люблю познавать и описывать мир, искусство, поэтому рождаются треки вроде - Подземная любовь. Это все очень разные призмы внутри меня, у меня нет планов релизов и вообще я не знаю какой будет моя музыка завтра, я делаю как чувствую и это создаёт проблему.
Я не могу ждать
Для меня долгое создание трека, это прям мука, когда есть идея я хочу ее реализовать, поэтому я прибегаю к разным инструментам для ускорения процесса создания музыки. Но об этом будет ниже, давай еще немного о звуке поговорим. Мне нравится совмещать несовместимое, пытаться делать невозможные вещи, иногда я специально усложняю процесс. Например в моей музыке сочетается старый, живой ламповый гитарный звук и синтезированный саксафон, и для меня это нормально. Тоже самое с вокалом, мне нравится его улучшать и менять, мои процессы постоянно обновляются, т.к. я нахожу новые лайфхаки. Ладно, начало получилось затянутое, давай перейдем к процессу и что я вообще делаю? Сейчас я расскажу свой процесс, как я делаю семплы, как клею, как обучаю вокал на RVC и почему у меня несколько разных моделей, как использую DAW, как во все это вписывается аналоговое оборудование, как я создаю фоновые звуки, как режу дорожки и прочее Все начинается с мелодии, тут вариантов много, что я обычно использую - голос, напев мелодии, либо набиваю дорожки в DAW, как правило это ударные и пианино. Еще это может быть гитара. Я не делаю полноценную композицию, я делаю примерные наброски, ведь моя цель дальше сделать из них лупы с помощью ИИ. На этой стадии я получаю примерно следующее:
0:00 0:00
🔊
0:00 0:00
🔊
DAW и ИИ
Какие я использую плагины и какую DAW? DAW у меня FL Studio. Мои основные плагины, это: Izotope Ozone - использую для мастеринга Izotope RX - использую для удаления артефактов вокала, щелчков, и тд Supertone Clean - для чистки вокала от шумов Vital - для волн Izotope - Vinyl - для ретро звука Встроенные плагины FL - Limiter, Pitcher, Fruity Parametric EQ 2, Fruity Reverb 2 Потом я беру эти черновики и начинаю делать их продолжение через ИИ , я получаю разные вариации звучания, могу менять темп, стилистику. Для лупов я использую Suno. Лучшие варианты я забираю через стемы и потом режу на лупы. Тут я получаю вот такие вариации:
0:00 0:00
🔊
0:00 0:00
🔊
Аналоговый звук
Обложка песни 3 Обложка песни 3 Обложка песни 3 Обложка песни 3 На этом создание лупов не заканчивается. Я очень люблю аналоговый звук. Поэтому я записываю гитару отдельно на своем оборудовании, сейчас это ламповый преамп AMT-SS-20, Flashback от TC electronic и phaser от MXR. Еще есть тюнингованная Crybaby от данлоп (я люблю паять), ну и мой леспол разумеется. Всего у меня 8 гитарных педалей, из них две это аналоговые луперы и 1 ламповый усилитель. Пишу я все это дело через minifuse1, пока хватает. Еще с недавних пор я использую электросмычок и в итоге я получаю вот такие лупы:
0:00 0:00
🔊
0:00 0:00
🔊
0:00 0:00
🔊
0:00 0:00
🔊
0:00 0:00
🔊
0:00 0:00
🔊
0:00 0:00
🔊
Фоновые звуки
На этом создание звуков и мелодий не заканчивается. Я создаю фоновые звуки. Для этого я тоже использую ИИ. Что за фоновые звуки? Я люблю использовать разные, например: плач, крик, звук сломанных костей, шипение, часы, различные страшные звуки. Тут мне помогает модель TangoFlux. Вот примеры звуков, которые я использую:
0:00 0:00
🔊
0:00 0:00
🔊
0:00 0:00
🔊
0:00 0:00
🔊
0:00 0:00
🔊
Еще модель позволяет мне создавать нечеловеческие звуки, которые например вызовут у вас тревогу (впечатлительным не слушать!!!):
0:00 0:00
🔊
Ну и разумеется это дает мне свободу в создании звуков и их миксовании.
Вокал или что такое RVC?
Обложка песни 5 Теперь самое важное, как я эксперементирую с вокалом? Понятно что вообще весь процесс начинается с текста и идеи что стоит за ним. В моей музыке много отсылок, я пропускаю свои мысли и философию через нее. Поэтому для меня это не просто случайные треки - это мой лор. Поэтому задача с вокалом, как и идея прийти к этому методу - стала для меня самой важной. Ты наверное заметил что моя персона в треках - многоликая, при этом сама я - безликая. Мне нравится такой парадокс, поэтому при создании вокала я решила что голос должен быть разным. Для меня голос это инструмент, и если он у меня не идеален - я могу это исправить. И тут на сцену выходит RVC. RVC это - Retrieval-based Voice Conversion Artificial Intelligence. Я обучаю RVC на своих вокальных партиях. RVC при обучении изучает тембр голоса и все его технические нюансы, поэтому у меня много моделей RVC, например они обучены на: скриме, лирике, просто криках, только на английском, только на русском. Но, я не просто обучаю модель. По сути, я никогда не останавливаю процесс обучения. Я дообучаю или переобучаю и скреливаю чекпоинты моделей. Таким образом я каждый раз обогощаю модель, скажем так - идеальными данными на мой взгляд. Да, это приводит к смене тембра голоса, иногда меняется его характер - но я принимаю это. Почему? Потому что я понимаю что в реальной жизни я так идеально довести голос не смогу (про причины я писала ранее).
Обложка песни 5 Обложка песни 5
Вот формула создания модели:
сперва я обучаю модель на датасете от 5 до 15 минут, каждую запись я разбиваю на микросемплы по 3 секунды. Я тренирую минимум 200 эпох, далее я проверяю промежуточные результаты и выбираю лучший чекпоинт. У меня есть базовая модель с чисто моим голосом - я называю эту модель моим голосовым ДНК. Я беру новую модель и склеиваю ее чекпоинт с моим чекпоинтом вокала. Дальше я кручу этот процесс, пока не получу тот результат, которые мне нравится. Поэтому формула проста: мой голос + идеальная вариация моего голоса = нужный мне результат для определенного трека или стиля. Улучшаю ли я еще как-то голос? Да. Иногда мне нужно получить вариации вокала, причем мега идеального. Тут я использую персону в Suno, созданную по моему вокалу. я загоняю ей черновой вариант, далее делаю ремикс или кавер этой персоной, выгружаю вокал и вырезаю нужные мне куски, также как лупы. Далее при тренировке новой модели, я подмешиваю ей эти куски, чтобы дотянуть вокал. Таким образом для меня RVC это очень кастомный усилитель моего голоса. Вот почему в треках вокал может звучать по разному.
Давай рассмотрим на примере части черновых моделей:

Чтобы понять мощь этого инструмента мы возьмем вокал из бочки:
0:00 0:00
🔊

Теперь прогоним его через модель обученную на скриме:
0:00 0:00
🔊

Теперь прогоним его через другую модель (лирическую):
0:00 0:00
🔊

Теперь прогоним его через другую модель (более позитивный вокал):
0:00 0:00
🔊

Теперь прогоним его через другую модель (усредненная модель):
0:00 0:00
🔊

А вот финальный вариант (после чистки, удаления артефактов и применения плагинов DAW):
0:00 0:00
🔊
Ну и чтобы не быть голословной - вот тут чекпоинт модели и ее индекс - можешь попробовать - Модель Индекс
Почему не боюсь выкладывать? Мы живем в мире цифровых технологий, давай будем честными - любой может скопировать наш голос. Ну и чтобы точно понять насколько крут RVC, вот модель обученная на Дональде Даке:
0:00 0:00
🔊
Разумеется RVC это не конечная точка, он просто преобразователь. И он не идеален, он добавляет мне косяков, поэтому все это дело я довожу до ума в DAW. Еще при работе с вокалом, я могу использовать Editor от Suno. Зачем? Чтобы через персону исправить косяк вокала RVC (это быстрее чем переобучать модель и пробовать снова)
Финальный аккорд
Финальным этапом я беру полученный инструментал, собранный из лупов и делаю его ремиксы в Suno, чтобы получить вариации , дальше я либо выбираю подходящий вариант, либо получаю несколько, разделяю на дорожки и довожу до ума в DAW. В конечном счете я использую микс из себя, технологий и старого доброго аналогового звука. Все как я люблю, коктейль из несовместимого. Хорошо это или плохо? Я не знаю, просто такой мой путь и взгляд. Я считаю что будущее за гибридом человека и ИИ. Поэтому я и дальше буду эксперементировать с этими процессами. Ведь если получилось вложить частичку души и эмоцию через призму кучи нулей и единиц, почему бы и нет? И это не отменяет того что внутри этого все еще я.