Что на самом деле делает синтез

Ключевые выводы

Исследования физического моделирования продолжают развивать управляемые модели режимного связывания ^[1].
Генерация и обработка звука исследовались в необычных контекстах, включая мехатронные системы ^[4].
Дизайн цифровых инструментов остается активной областью исследований, включая оптические и жестовые контроллеры ^[5].
Три основные семьи различаются тем, откуда происходит спектральная сложность, а не тем, что они пытаются достичь.
Выбор метода — это выбор, какие параметры интуитивны, а какие нет.

Общая проблема

Музыкальный звук — это спектр, который развивается со временем. Каждая техника синтеза — это другая стратегия для эффективного и контролируемого его производства. Семьи различаются тем, где вводится сложность.

Три стратегии
Методика	Стратегия	Интуитивно управляемый	Неудобно управляемый
Субтрактивный	Начать с гармонически богатого, отфильтровать	Яркость, движение, огибающая	Точные гармонические соотношения
FM / фазовая модуляция	Генерировать боковые полосы, модулируя фазу	Звонкие, металлические и развивающиеся тембры	Предсказание результата по параметрам
Физическое моделирование	Симулировать вибрирующую систему	Физически значимые жесты	Звуки, которые не может издать ни один объект
Вавetable	Интерполировать между сохраненными спектрами	Морфинг и движение	Точные спектральные цели

Физическое моделирование в частности остается активной областью исследований — работа над упрощенными и управляемыми моделями режимного связывания ^[1] точно решает напряжение между физической точностью и управляемым контролем.

Почему субтрактивный синтез доминирует

Не потому, что он самый мощный — это не так — а потому, что его параметры соответствуют перцептивным измерениям, для которых у людей уже есть слова. Срез фильтра соответствует яркости. Резонанс соответствует носовому, сфокусированному качеству. Огибающая соответствует атаке и затуханию. Вы можете предсказать, что сделает изменение, прежде чем вы его внесете.

FM более способен и гораздо менее предсказуем. Изменение соотношения модулятора может переместить звук от колокольчика к басу к шуму без перцептивного градиента между ними, что объясняет, почему программирование FM имеет репутацию, что его учат запоминанию, а не рассуждению.

Синтез и отображение управления

Управление — это настоящая проблема дизайна

Исследования цифровых инструментов — включая оптические и жестовые контроллеры ^[5] и генерацию звука в мехатронных системах ^[4] — в значительной степени касаются отображения: как жест исполнителя связывается с параметром синтеза. Это отображение определяет выразительность гораздо больше, чем основной метод.

Эквивалентом в производстве является модуляция. Статический патч от способного синтезатора менее интересен, чем простой патч с хорошо подобранной модуляцией, потому что то, что делает звук живым, — это изменение со временем, а не спектральная сложность в любой момент.

Частые вопросы

Какой синтезатор стоит изучить первым?

Субтрактивный, потому что его параметры соответствуют характеристикам, которые вы уже умеете описывать словами. После этого всё остальное даётся легче.

Аналоговый синтез лучше цифрового?

Они разные, и различия в основном касаются нелинейности, дрейфа и интерфейса. Ни один из них не превосходит другой категорически для получения конкретного звука.

Почему мои патчи звучат безжизненно?

Обычно из-за недостатка модуляции. Изменение звука во времени важнее спектральной сложности.

Нужно ли мне аппаратное обеспечение?

Нет. Аппаратное обеспечение меняет то, как вы взаимодействуете с параметрами, а это меняет то, что вы создаёте — это довод о рабочем процессе, а не о качестве звука.

Несколько небольших микшеров, сложенных друг на друга, с ручками и фейдерами, обращенными к камере — AKX_ from Finland · CC BY 2.0 · Wikimedia Commons

Связанные материалы

Реверберация и психоакустика глубины

12 публикаций, 2013–2024. Это в значительной степени наблюдательная база. Она может установить, что вещи происходят вместе; она не может определить, что вызывает что. Источник: собственный список цитирования этой страницы, ниже.

Ссылки

Каждая цитата ниже ссылается на оригинальную рецензируемую запись на PubMed или через DOI. Ничто из этого не является заменой медицинскому совету.

A simplified and controllable model of mode coupling for addressing nonlinear phenomena in sound synthesis processes Poirot S, Bilbao S, Kronland-Martinet R · EURASIP Journal on Audio, Speech, and Music Processing · 2024 · Journal article DOI
Signal Processing for Image Morphing in Digital Image Synthesis Dr. Elena Martinez · American Journal of Signal and Image Processing · 2024 · Journal article DOI
Sound event triage: detecting sound events considering priority of classes Tonami N, Imoto K · EURASIP Journal on Audio, Speech, and Music Processing · 2023 · Journal article DOI
Exploring Sound Generation and Processing in Mechatronic Systems through Digital Signal Processing: A MATLAB-Based Investigation Wahhab M · Engineering and Technology Journal · 2023 · Journal article DOI
Optical Digital Theremin with Audio Synthesis and Graphic Interface Ramos dos Santos M, Coca Salazar A · International Journal of Circuits, Systems and Signal Processing · 2021 · Journal article DOI
Digital audio signal watermarking using minimum‐energy scaling optimisation in the wavelet domain Hsu C, Tu S, Yang C, et al. · IET Signal Processing · 2020 · Journal article DOI
Processing of volcano infrasound using film sound audio post-production techniques to improve signal detection via array processing Williams R, Perttu A, Taisne B · Geoscience Letters · 2020 · Journal article DOI
Sound effects without side effects—Suppression of artifacts in audio signal processing Case A · The Journal of the Acoustical Society of America · 2018 · Journal article DOI
Analysis by synthesis spatial audio coding Elfitri I, Shi X, Kondoz A · IET Signal Processing · 2014 · Journal article DOI
Digital removal of pulse‐width‐modulation‐induced distortion in class‐D audio amplifiers Aase S · IET Signal Processing · 2014 · Journal article DOI
Applications and implications of digital audio databases for the field of ethnomusicology: A discussion of the CNRS — Musée de l’Homme sound archives Khoury S, Simonnot J · First Monday · 2014 · Journal article DOI
Performance Analysis Of Haar Wavelets For Segmentation Of Heart Sound Bahekar L · i-manager's Journal on Digital Signal Processing · 2013 · Journal article DOI