Как я создаю музыку?
Автор - Cristie
Начнем наше путешествие?
Привет, мой дорогой слушатель!
Поговорим про звук?
Вообще эта статья не просто про звук и как я создаю музыку, это про процесс, историю, мысли, философию.
С чего начать?
Давай начнем с того, с чего начинается любой звук, а точнее то что идёт до него.
Это идея, каждый трек это мои мысли, эмоции, попытка передать их, выгрузить из себя и записать в музыку, любыми способами.
Тут у нас начинаются прыжки по стилям, я не хочу себя ограничивать, в моей голове хаос в плане идей, поэтому я прыгаю от трип-хопа до индастриала, дабстепа и просто поп музыки. По текстам тоже самое, я люблю выгружать эмоции и у меня получаются меланхоличные треки, но также я люблю драйв и треш, поэтому рождаются треки вроде Трупиков и Пеннивайза, а ещё я люблю познавать и описывать мир, искусство, поэтому рождаются треки вроде - Подземная любовь. Это все очень разные призмы внутри меня, у меня нет планов релизов и вообще я не знаю какой будет моя музыка завтра, я делаю как чувствую и это создаёт проблему.
Я не могу ждать
Для меня долгое создание трека, это прям мука, когда есть идея я хочу ее реализовать, поэтому я прибегаю к разным инструментам для ускорения процесса создания музыки. Но об этом будет ниже, давай еще немного о звуке поговорим.
Мне нравится совмещать несовместимое, пытаться делать невозможные вещи, иногда я специально усложняю процесс.
Например в моей музыке сочетается старый, живой ламповый гитарный звук и синтезированный саксафон, и для меня это нормально. Тоже самое с вокалом, мне нравится его улучшать и менять, мои процессы постоянно обновляются, т.к. я нахожу новые лайфхаки.
Ладно, начало получилось затянутое, давай перейдем к процессу и что я вообще делаю?
Сейчас я расскажу свой процесс, как я делаю семплы, как клею, как обучаю вокал на RVC и почему у меня несколько разных моделей, как использую DAW, как во все это вписывается аналоговое оборудование, как я создаю фоновые звуки, как режу дорожки и прочее
Все начинается с мелодии, тут вариантов много, что я обычно использую - голос, напев мелодии, либо набиваю дорожки в DAW, как правило это ударные и пианино. Еще это может быть гитара. Я не делаю полноценную композицию, я делаю примерные наброски, ведь моя цель дальше сделать из них лупы с помощью ИИ. На этой стадии я получаю примерно следующее:
0:00
0:00
0:00
0:00
DAW и ИИ
Какие я использую плагины и какую DAW?
DAW у меня FL Studio.
Мои основные плагины, это:
Izotope Ozone - использую для мастеринга
Izotope RX - использую для удаления артефактов вокала, щелчков, и тд
Supertone Clean - для чистки вокала от шумов
Vital - для волн
Izotope - Vinyl - для ретро звука
Встроенные плагины FL - Limiter, Pitcher, Fruity Parametric EQ 2, Fruity Reverb 2
Потом я беру эти черновики и начинаю делать их продолжение через ИИ , я получаю разные вариации звучания, могу менять темп, стилистику. Для лупов я использую Suno. Лучшие варианты я забираю через стемы и потом режу на лупы. Тут я получаю вот такие вариации:
0:00
0:00
0:00
0:00
Аналоговый звук
На этом создание лупов не заканчивается. Я очень люблю аналоговый звук.
Поэтому я записываю гитару отдельно на своем оборудовании, сейчас это ламповый преамп AMT-SS-20, Flashback от TC electronic и phaser от MXR. Еще есть тюнингованная Crybaby от данлоп (я люблю паять), ну и мой леспол разумеется.
Всего у меня 8 гитарных педалей, из них две это аналоговые луперы и 1 ламповый усилитель.
Пишу я все это дело через minifuse1, пока хватает. Еще с недавних пор я использую электросмычок и в итоге я получаю вот такие лупы:
0:00
0:00
0:00
0:00
0:00
0:00
0:00
0:00
0:00
0:00
0:00
0:00
0:00
0:00
Фоновые звуки
На этом создание звуков и мелодий не заканчивается. Я создаю фоновые звуки.
Для этого я тоже использую ИИ. Что за фоновые звуки? Я люблю использовать разные, например: плач, крик, звук сломанных костей, шипение, часы, различные страшные звуки.
Тут мне помогает модель TangoFlux. Вот примеры звуков, которые я использую:
Еще модель позволяет мне создавать нечеловеческие звуки, которые например вызовут у вас тревогу (впечатлительным не слушать!!!):
Ну и разумеется это дает мне свободу в создании звуков и их миксовании.
0:00
0:00
0:00
0:00
0:00
0:00
0:00
0:00
0:00
0:00
0:00
0:00
Вокал или что такое RVC?
Теперь самое важное, как я эксперементирую с вокалом?
Понятно что вообще весь процесс начинается с текста и идеи что стоит за ним.
В моей музыке много отсылок, я пропускаю свои мысли и философию через нее.
Поэтому для меня это не просто случайные треки - это мой лор.
Поэтому задача с вокалом, как и идея прийти к этому методу - стала для меня самой важной.
Ты наверное заметил что моя персона в треках - многоликая, при этом сама я - безликая.
Мне нравится такой парадокс, поэтому при создании вокала я решила что голос должен быть разным. Для меня голос это инструмент, и если он у меня не идеален - я могу это исправить. И тут на сцену выходит RVC.
RVC это - Retrieval-based Voice Conversion Artificial Intelligence.
Я обучаю RVC на своих вокальных партиях. RVC при обучении изучает тембр голоса и все его технические нюансы, поэтому у меня много моделей RVC, например они обучены на:
скриме, лирике, просто криках, только на английском, только на русском.
Но, я не просто обучаю модель. По сути, я никогда не останавливаю процесс обучения.
Я дообучаю или переобучаю и скреливаю чекпоинты моделей. Таким образом я каждый раз обогощаю модель, скажем так - идеальными данными на мой взгляд.
Да, это приводит к смене тембра голоса, иногда меняется его характер - но я принимаю это.
Почему? Потому что я понимаю что в реальной жизни я так идеально довести голос не смогу (про причины я писала ранее).
Вот формула создания модели:
сперва я обучаю модель на датасете от 5 до 15 минут, каждую запись я разбиваю на микросемплы по 3 секунды. Я тренирую минимум 200 эпох, далее я проверяю промежуточные результаты и выбираю лучший чекпоинт. У меня есть базовая модель с чисто моим голосом - я называю эту модель моим голосовым ДНК. Я беру новую модель и склеиваю ее чекпоинт с моим чекпоинтом вокала. Дальше я кручу этот процесс, пока не получу тот результат, которые мне нравится. Поэтому формула проста: мой голос + идеальная вариация моего голоса = нужный мне результат для определенного трека или стиля. Улучшаю ли я еще как-то голос? Да. Иногда мне нужно получить вариации вокала, причем мега идеального. Тут я использую персону в Suno, созданную по моему вокалу. я загоняю ей черновой вариант, далее делаю ремикс или кавер этой персоной, выгружаю вокал и вырезаю нужные мне куски, также как лупы. Далее при тренировке новой модели, я подмешиваю ей эти куски, чтобы дотянуть вокал. Таким образом для меня RVC это очень кастомный усилитель моего голоса. Вот почему в треках вокал может звучать по разному.
Давай рассмотрим на примере части черновых моделей:
Чтобы понять мощь этого инструмента мы возьмем вокал из бочки:
0:00
0:00
Теперь прогоним его через модель обученную на скриме:
0:00
0:00
Теперь прогоним его через другую модель (лирическую):
0:00
0:00
Теперь прогоним его через другую модель (более позитивный вокал):
0:00
0:00
Теперь прогоним его через другую модель (усредненная модель):
0:00
0:00
А вот финальный вариант (после чистки, удаления артефактов и применения плагинов DAW):
0:00
0:00
Почему не боюсь выкладывать? Мы живем в мире цифровых технологий, давай будем честными - любой может скопировать наш голос. Ну и чтобы точно понять насколько крут RVC, вот модель обученная на Дональде Даке:
0:00
0:00
Финальный аккорд
Финальным этапом я беру полученный инструментал, собранный из лупов и делаю его ремиксы в Suno, чтобы получить вариации , дальше я либо выбираю подходящий вариант, либо получаю несколько, разделяю на дорожки и довожу до ума в DAW.
В конечном счете я использую микс из себя, технологий и старого доброго аналогового звука. Все как я люблю, коктейль из несовместимого.
Хорошо это или плохо?
Я не знаю, просто такой мой путь и взгляд.
Я считаю что будущее за гибридом человека и ИИ.
Поэтому я и дальше буду эксперементировать с этими процессами.
Ведь если получилось вложить частичку души и эмоцию через призму кучи нулей и единиц, почему бы и нет? И это не отменяет того что внутри этого все еще я.