AI-звукорежиссёр

Проблема

В лайв-сете, который идёт одним непрерывным пространством, микс никогда не стоит на месте. Генеративные части добавляют и убирают слои, агенты открывают фильтры в течение нескольких минут, плотность всего вместе постоянно меняется. Каждое такое движение меняет уровни. Если ничего не делать, длинное нарастание ведёт себя так, как длинные нарастания обычно и ведут: становится громче, низ копится, лимитер на мастере работает усерднее, чем его просили, и к пику не остаётся запаса для момента, который и должен был стать пиком.

Живой звукорежиссёр за пультом исправляет это на слух весь вечер. На таком сете его может и не быть, а даже если он есть, он не знает, что напряжение должно расти ещё минут шесть.

Гипотеза

Рутинную часть работы звукорежиссёра может взять петля обратной связи: послушать выход, сравнить с целью, поправить гейн, эквалайзер и компрессию, послушать снова. Если эта петля к тому же получает от остальной системы музыкальное состояние (куда должна идти энергия, сколько должно длиться нарастание), она сможет держать уровень примерно там, где нужно, и оставить место для того, чтобы интенсивность росла за счёт аранжировки и тембра, а не громкости.

Меньше всего я уверен во второй половине. Держать уровни в порядке в принципе умеют давно. Понять, что тихий момент задуман тихим и «исправлять» его не надо, пока не умеет никто.

Схема

Отправная точка та самая система, которую я описываю в главе книги про звукорежиссёров: модель слушает зал через измерительный микрофон, сравнивает услышанное с целью и управляет цифровым пультом по сети так, как управлял бы планшет. Делалась она для живого звука группы. Для Nobody Quits её приспосабливают к другой работе:

• входы: стереовыход и основные стемы из DAW, плюс микрофон в зале, когда есть зал;
• контекст: поток музыкального состояния из лайв-системы (темп, сцена, энергия, заданное направление);
• выходы: гейн каналов, эквалайзер, компрессия на шинах и уровни посылов; лимитер на мастере не трогается, за ним только следят;
• жёсткий оверрайд: одним контролом я могу заморозить любой канал или всю петлю, и трогать замороженное петле запрещено.

Цели задаются для каждой секции сета, а не одной фиксированной кривой, чтобы брейкдаун имел право быть тихим.

Результат

Предварительно. Петля проходит тесты на той схеме группы, для которой она делалась; прогоны на сете Nobody Quits ещё впереди.

• Удерживает ли уровни, пока приходят и уходят слои: TBD для этого материала.
• Запас на пике длинных нарастаний по сравнению с прогоном без помощи: TBD, нужно сравнение один к одному.
• Уважает ли петля задуманно тихие секции, когда у неё есть музыкальное состояние: TBD. Это главный вопрос.
• Как часто пришлось пользоваться оверрайдом: TBD, будет записываться в лог.

Цифры здесь появятся только тогда, когда будут взяты из записанного прогона.

Что изменилось

Первым изменилось то, как я думаю о цели. Начинал я с «одного хорошо звучащего микса», и быстро стало ясно, что сету нужна последовательность целей, которая идёт за музыкальным состоянием, иначе петля разгладит ровно ту динамику, которую я пытаюсь построить.

Второе касается оверрайда. Задумывался он как предохранитель. Постепенно он превращается в инструмент: нарочно заморозить петлю на отрезке, где я хочу, чтобы микс оставался шершавым, такое же музыкальное решение, как любое другое.