Що насправді робить синтез

Основні висновки

Дослідження фізичного моделювання продовжує розвивати керовані моделі зв'язку режимів ^[1].
Генерація та обробка звуку досліджуються в нетрадиційних контекстах, включаючи мехатронні системи ^[4].
Дизайн цифрових інструментів залишається активною областю досліджень, включаючи оптичні та жестові контролери ^[5].
Три основні сімейства відрізняються тим, звідки походить спектральна складність, а не тим, що вони намагаються досягти.
Вибір методу — це вибір, які параметри є інтуїтивними, а які — ні.

Спільна проблема

Музичний звук — це спектр, що еволюціонує з часом. Кожна техніка синтезу є різною стратегією для ефективного та контрольованого виробництва одного. Сімейства відрізняються тим, де вводиться складність.

Три стратегії
Метод	Стратегія	Інтуїтивно контролювати	Незручно контролювати
Субтрактивний	Почати з гармонійно багатого, відфільтрувати	Яскравість, рух, обгортка	Точні гармонійні відносини
FM / фазова модуляція	Генерувати бічні смуги, модуляціючи фазу	Дзвони, металеві та еволюційні тембри	Прогнозування результату з параметрів
Фізичне моделювання	Симулювати вібруючу систему	Фізично значущі жести	Звуки, які не може створити жоден об'єкт
Вавтаблиця	Інтерполювати між збереженими спектрами	Морфінг та рух	Точні спектральні цілі

Фізичне моделювання, зокрема, залишається активною областю досліджень — робота над спрощеними та керованими моделями зв'язку режимів ^[1] точно вирішує напругу між фізичною точністю та ігровим контролем.

Чому субтрактивний домінує

Не тому, що він найпотужніший — це не так — а тому, що його параметри відповідають перцептивним вимірам, для яких люди вже мають слова. Відсікання фільтра відповідає яскравості. Резонанс відповідає носовій, зосередженій якості. Обгортка відповідає атаці та затуханню. Ви можете передбачити, що змінить зміна, перш ніж ви її зробите.

FM є більш здатним і набагато менш передбачуваним. Зміна співвідношення модулятора може перемістити звук від дзвону до басу до шуму без перцептивного градієнта між ними, що пояснює, чому програмування FM має репутацію, що його вивчають шляхом запам'ятовування, а не міркування.

Синтез та картографування контролю

Контроль — це справжня проблема дизайну

Дослідження цифрових інструментів — включаючи оптичні та жестові контролери ^[5] та генерацію звуку в мехатронних системах ^[4] — в основному стосується картографування: як жест виконавця пов'язується з параметром синтезу. Це картографування визначає виразність набагато більше, ніж основний метод.

Виробничий еквівалент — це модуляція. Статичний патч від здатного синтезатора менш цікавий, ніж простий патч з добре обраною модуляцією, оскільки те, що робить звук живим, — це зміна з часом, а не спектральна складність в будь-який момент.

Загальні запитання

Який синтезатор мені слід вивчити першим?

Субтрактивний, тому що його параметри відповідають якостям, які ви вже можете описати. Все інше буде легшим потім.

Чи краще аналогове, ніж цифрове?

Різні, і відмінності в основному полягають у нелінійності, дрейфі та інтерфейсі. Жоден з них не є категорично кращим для виробництва даного звуку.

Чому мої патчі звучать безжиттєво?

Зазвичай через недостатню модуляцію. Зміна з часом важливіша за спектральну складність.

Чи потрібен мені апарат?

Ні. Апарат змінює, як ви взаємодієте з параметрами, що змінює те, що ви створюєте — це аргумент про робочий процес, а не про якість звуку.

Посилання

Кожне посилання нижче веде до оригінального рецензованого запису на PubMed або через DOI. Нічого з цього не є заміною медичної поради.

A simplified and controllable model of mode coupling for addressing nonlinear phenomena in sound synthesis processes Poirot S, Bilbao S, Kronland-Martinet R · EURASIP Journal on Audio, Speech, and Music Processing · 2024 · Journal article DOI
Signal Processing for Image Morphing in Digital Image Synthesis Dr. Elena Martinez · American Journal of Signal and Image Processing · 2024 · Journal article DOI
Sound event triage: detecting sound events considering priority of classes Tonami N, Imoto K · EURASIP Journal on Audio, Speech, and Music Processing · 2023 · Journal article DOI
Exploring Sound Generation and Processing in Mechatronic Systems through Digital Signal Processing: A MATLAB-Based Investigation Wahhab M · Engineering and Technology Journal · 2023 · Journal article DOI
Optical Digital Theremin with Audio Synthesis and Graphic Interface Ramos dos Santos M, Coca Salazar A · International Journal of Circuits, Systems and Signal Processing · 2021 · Journal article DOI
Digital audio signal watermarking using minimum‐energy scaling optimisation in the wavelet domain Hsu C, Tu S, Yang C, et al. · IET Signal Processing · 2020 · Journal article DOI
Processing of volcano infrasound using film sound audio post-production techniques to improve signal detection via array processing Williams R, Perttu A, Taisne B · Geoscience Letters · 2020 · Journal article DOI
Sound effects without side effects—Suppression of artifacts in audio signal processing Case A · The Journal of the Acoustical Society of America · 2018 · Journal article DOI
Analysis by synthesis spatial audio coding Elfitri I, Shi X, Kondoz A · IET Signal Processing · 2014 · Journal article DOI
Digital removal of pulse‐width‐modulation‐induced distortion in class‐D audio amplifiers Aase S · IET Signal Processing · 2014 · Journal article DOI
Applications and implications of digital audio databases for the field of ethnomusicology: A discussion of the CNRS — Musée de l’Homme sound archives Khoury S, Simonnot J · First Monday · 2014 · Journal article DOI