Что такое синтез на самом деле

Ключевые выводы

Исследования физического моделирования продолжают развивать управляемые модели режимного связывания ^[1].
Генерация и обработка звука исследовались в необычных контекстах, включая мехатронные системы ^[4].
Дизайн цифровых инструментов остается активной областью исследований, включая оптические и жестовые контроллеры ^[5].
Три основные семьи различаются тем, откуда происходит спектральная сложность, а не тем, что они пытаются достичь.
Выбор метода — это выбор, какие параметры интуитивны, а какие нет.

Общая проблема

Музыкальный звук — это спектр, который развивается со временем. Каждая техника синтеза — это другая стратегия для эффективного и контролируемого его производства. Семьи различаются тем, где вводится сложность.

Три стратегии
Метод	Стратегия	Интуитивно управляемый	Неудобно управляемый
Субтрактивный	Начать с гармонически богатого, отфильтровать	Яркость, движение, огибающая	Точные гармонические соотношения
FM / фазовая модуляция	Генерировать боковые полосы, модулируя фазу	Звонкие, металлические и развивающиеся тембры	Предсказание результата по параметрам
Физическое моделирование	Симулировать вибрирующую систему	Физически значимые жесты	Звуки, которые не может издать ни один объект
Вавetable	Интерполировать между сохраненными спектрами	Морфинг и движение	Точные спектральные цели

Физическое моделирование в частности остается активной областью исследований — работа над упрощенными и управляемыми моделями режимного связывания ^[1] точно решает напряжение между физической точностью и управляемым контролем.

Почему субтрактивный синтез доминирует

Не потому, что он самый мощный — это не так — а потому, что его параметры соответствуют перцептивным измерениям, для которых у людей уже есть слова. Срез фильтра соответствует яркости. Резонанс соответствует носовому, сфокусированному качеству. Огибающая соответствует атаке и затуханию. Вы можете предсказать, что сделает изменение, прежде чем вы его внесете.

FM более способен и гораздо менее предсказуем. Изменение соотношения модулятора может переместить звук от колокольчика к басу к шуму без перцептивного градиента между ними, что объясняет, почему программирование FM имеет репутацию, что его учат запоминанию, а не рассуждению.

Синтез и отображение управления

Управление — это настоящая проблема дизайна

Исследования цифровых инструментов — включая оптические и жестовые контроллеры ^[5] и генерацию звука в мехатронных системах ^[4] — в значительной степени касаются отображения: как жест исполнителя связывается с параметром синтеза. Это отображение определяет выразительность гораздо больше, чем основной метод.

Эквивалентом в производстве является модуляция. Статический патч от способного синтезатора менее интересен, чем простой патч с хорошо подобранной модуляцией, потому что то, что делает звук живым, — это изменение со временем, а не спектральная сложность в любой момент.

Распространенные вопросы

Какой синтезатор мне следует учить первым?

Субтрактивный, потому что его параметры соответствуют качествам, которые вы уже можете описать. Все остальное будет проще потом.

Аналоговый лучше цифрового?

Разные, и различия в основном заключаются в нелинейности, дрейфе и интерфейсе. Ни один из них не является категорически превосходящим для производства данного звука.

Почему мои патчи звучат безжизненно?

Обычно из-за недостаточной модуляции. Изменение со временем важнее, чем спектральная сложность.

Мне нужно оборудование?

Нет. Оборудование изменяет то, как вы взаимодействуете с параметрами, что изменяет то, что вы создаете — это аргумент о рабочем процессе, а не о качестве звука.

Ссылки

Каждая цитата ниже ссылается на оригинальную рецензируемую запись на PubMed или через DOI. Ничто из этого не является заменой медицинскому совету.

A simplified and controllable model of mode coupling for addressing nonlinear phenomena in sound synthesis processes Poirot S, Bilbao S, Kronland-Martinet R · EURASIP Journal on Audio, Speech, and Music Processing · 2024 · Journal article DOI
Signal Processing for Image Morphing in Digital Image Synthesis Dr. Elena Martinez · American Journal of Signal and Image Processing · 2024 · Journal article DOI
Sound event triage: detecting sound events considering priority of classes Tonami N, Imoto K · EURASIP Journal on Audio, Speech, and Music Processing · 2023 · Journal article DOI
Exploring Sound Generation and Processing in Mechatronic Systems through Digital Signal Processing: A MATLAB-Based Investigation Wahhab M · Engineering and Technology Journal · 2023 · Journal article DOI
Optical Digital Theremin with Audio Synthesis and Graphic Interface Ramos dos Santos M, Coca Salazar A · International Journal of Circuits, Systems and Signal Processing · 2021 · Journal article DOI
Digital audio signal watermarking using minimum‐energy scaling optimisation in the wavelet domain Hsu C, Tu S, Yang C, et al. · IET Signal Processing · 2020 · Journal article DOI
Processing of volcano infrasound using film sound audio post-production techniques to improve signal detection via array processing Williams R, Perttu A, Taisne B · Geoscience Letters · 2020 · Journal article DOI
Sound effects without side effects—Suppression of artifacts in audio signal processing Case A · The Journal of the Acoustical Society of America · 2018 · Journal article DOI
Analysis by synthesis spatial audio coding Elfitri I, Shi X, Kondoz A · IET Signal Processing · 2014 · Journal article DOI
Digital removal of pulse‐width‐modulation‐induced distortion in class‐D audio amplifiers Aase S · IET Signal Processing · 2014 · Journal article DOI
Applications and implications of digital audio databases for the field of ethnomusicology: A discussion of the CNRS — Musée de l’Homme sound archives Khoury S, Simonnot J · First Monday · 2014 · Journal article DOI