BPM и Key Finder

Для определения темпа используется ансамбль нейронных сетей с точностью до 1 удара в минуту. Для определения тональности используется специальная сверточная нейронная сеть, обученная на базе более 50 000 треков. Обе функции работают локально на вашем устройстве — без серверной обработки.

Ди-джеям и продюсерам почти всегда требуется и то, и другое — чтобы определить темп без тональности (или наоборот), приходится загружать файл в другой инструмент. На этой странице оба анализа выполняются параллельно при одной загрузке, поэтому набор из 50 треков готовится за один проход вместо двух.

Нет. Обе нейронные сети работают исключительно на вашем устройстве. Ваши файлы никогда не покидают ваше устройство — даже временно для анализа.

Оба детектора используют один буфер декодированного аудио — Brizm выполняет анализ темпа и тональности параллельно с помощью двух нейронных сетей. Скорость обработки при совместном использовании обоих инструментов примерно такая же, как и при использовании каждого из них по отдельности. В одном результате вы получаете значение BPM, тональность (мажор или минор) и код Camelot.

Одно лишь совпадение BPM не гарантирует, что треки будут гармонично звучать вместе. Два трека со скоростью 128 BPM в несовместимых тональностях будут диссонировать при длительных переходах. Сочетание BPM и тональности по шкале Камелот позволяет провести предварительный отбор по гармонической совместимости ещё до составления сета. Правила совместимости см. на «колесе Камелот».

В основе лежат одни и те же нейронные сети — данная страница обрабатывает оба сигнала параллельно при одной загрузке, в то время как BPM Finder и Key Finder обрабатывают по одному сигналу за раз. Используйте специализированные инструменты, когда вам нужно только одно значение или когда вы хотите сравнить результаты с результатами другого детектора. Используйте этот комбинированный инструмент для подготовки DJ-сета, когда для каждого трека требуются оба значения.

MP3, WAV, FLAC, OGG, M4A и большинство других распространенных аудиоформатов размером до 30 МБ на файл — этого вполне достаточно для полноформатных миксов, удобных для диджеев, и треков из альбомов. Более объёмные файлы декодируются по частям, а не отбрасываются. При работе с очень длинными миксами рекомендуется анализировать отдельные треки, а не всю сессию целиком.

Синхронизация ритмов — это необходимое, но не достаточное условие

Сведение двух треков с одинаковым BPM позволяет синхронизировать ритмы бочки, но одинаковое темпо ничего не говорит о том, принадлежат ли эти треки к одному музыкальному миру. Если один трек написан в фа миноре, а следующий — в си мажоре, гармоническое расстояние между ними — шесть ступеней на колесе Камелота — является максимально возможным. Длительные синтезаторные партии, басовые линии и вокальные фразы сталкиваются лоб в лоб во время микширования, создавая диссонансный вихрь, который превращает плавный переход в автомобильную аварию. Опытные ди-джеи обходят эту проблему с помощью быстрых переходов или эффектов, но это лишь исправления проблемы, которую можно избежать. Решение заключается в том, чтобы заранее знать оба показателя: BPM говорит вам, что треки могут микшироваться, а код «Камелота» — что они должны.

Рабочий процесс, построенный на основе комбинированного считывания

Добавьте в очередь целый ящик и позвольте объединенному детектору промаркировать каждый файл. Сортируйте библиотеку сначала по кодам Camelot, затем по BPM внутри каждой группы кодов, и естественный порядок набора сложится практически сам собой: близкие коды Camelot (8A → 8B → 9A) плавно перетекают друг в друга, а смежные диапазоны BPM внутри каждой группы позволяют избежать слышимых сдвигов высоты тона, которые возникают при резких скачках темпа. BPM Finder и Поиск тональности дадут вам те же нейронные сети, работающие по отдельности, если вам нужно всего одно значение; эта страница создана потому, что в рабочем процессе диджея практически никогда не требуется получать по одному значению за раз.

Одно декодирование, две нейронные сети, параллельное вычисление

Самая ресурсоемкая часть анализа аудиофайла — это не само обнаружение, а загрузка файла в память в виде пригодного для обработки сигнала. Чтение контейнера, декодирование кодека с потерями, передискретизация до эталонной частоты дискретизации и преобразование в спектрограмму занимают большую часть реального времени. Brizm выполняет декодирование один раз и передает полученный буфер двум параллельным нейронным сеткам: модели отслеживания темпа, которая оценивает положения ударов и соответствующее значение BPM, и модели определения тональности, которая строит профиль класса высоты звука и классифицирует его по одной из 24 тональностей (12 мажорных плюс 12 минорных). Совместное использование декодированного буфера означает, что комбинированный проход выполняется едва ли медленнее, чем запуск любой из моделей в отдельности, несмотря на то, что он генерирует вдвое больше выходных данных.

Система обозначений «Камелот» простым языком

Детектор выдает как стандартное название тональности («F# минор», «C мажор»), так и код «Камелот» (формат, используемый диджеями: 11A, 8B и т. д.). Цифры от 1 до 12 идут по кругу; буква A обозначает минор, B — мажор. Переходы, гармонично сочетающиеся: одинаковый код, соседний код (на один шаг по часовой стрелке или против часовой стрелки) и тот же номер с перестановкой букв (8A → 8B). Переходы, звучащие негладко: на расстоянии двух или более шагов по кругу или перестановка букв в сочетании с переходом на один шаг. Справочник «Колесо Камелота» наглядно демонстрирует все взаимосвязи сразу. Как только библиотека помечена тегами, создание сета сводится к перемещению на небольшие расстояния по колесу между треками с похожим темпом.

Помимо подготовки к выступлению диджея, эта же информация полезна продюсерам при подборе сэмплов и ремикшерам при согласовании акапелл. Pitch Shifter позволяет сдвигать сэмпл на полутона, сохраняя его темп, поэтому, зная тональность сэмпла и тональность проекта, разницу в тональности можно компенсировать одним движением ползунка.