Визуализация музыки или визуализация музыки — функция, присутствующая в визуализаторах электронной музыки и программном обеспечении медиаплеера , — генерирует анимированные изображения на основе музыкального произведения. Изображения обычно генерируются и визуализируются в реальном времени и синхронизируются с музыкой во время ее воспроизведения.
Методы визуализации варьируются от простых (например, моделирование дисплея осциллографа ) до сложных, которые часто включают ряд сложных эффектов. Изменения громкости и частотного спектра музыки входят в число свойств, используемых в качестве входных данных для визуализации.
Эффективная визуализация музыки направлена на достижение высокой степени визуальной корреляции между спектральными характеристиками музыкальной дорожки, такими как частота и амплитуда , и объектами или компонентами визуализируемого и отображаемого визуального изображения.
Визуализация музыки может быть определена, в отличие от ранее существовавших предварительно созданных комбинаций музыки и визуализации (как, например, музыкальных клипов ), по ее характеристике как генерация в реальном времени . Другое возможное отличие некоторые видят в способности некоторых систем визуализации музыки (таких как MilkDrop Гейсса ) создавать разные визуализации для каждой песни или аудио каждый раз при запуске программы, в отличие от других форм визуализации музыки (таких как музыкальная визуализация ). видео или дисплей с лазерной подсветкой ), которые всегда показывают одну и ту же визуализацию. Визуализация музыки может быть достигнута в 2D или 3D системе координат , где можно изменить до шести измерений, причем 4-е, 5-е и 6-е измерения — это цвет, интенсивность и прозрачность.
Первым визуализатором электронной музыки был Atari Video Music, представленный Atari Inc. в 1977 году и разработанный инициатором домашней версии Pong Робертом Брауном. Идея заключалась в том, чтобы создать визуальное исследование, которое можно было бы реализовать в стереосистеме Hi-Fi . [1] В Великобритании визуализацию музыки впервые применил Фред Джадд .
Музыкальные и аудиоплееры были доступны на ранних домашних компьютерах. Например , Sound to Light Generator (1985, Infinite Software) использовал кассетный проигрыватель ZX Spectrum . [2] В фильме 1984 года « Электрические сны» он широко использовался, хотя и в качестве заранее созданного эффекта, а не рассчитываемого в реальном времени .
Для ПК / DOS одной из первых современных программ визуализации музыки была мультиплатформенная Cthugha с открытым исходным кодом , вышедшая в 1993 году. В 1990-х годах развивающаяся сцена демо- и трекерной музыки стала пионером в технике визуализации музыки в реальном времени на платформе ПК; результирующими примерами являются Cubic player (1994), Inertia Player (1995) или вообще их демо-версии , созданные в реальном времени . [3] [4]
Впоследствии компьютерная визуализация музыки на ПК получила широкое распространение в середине-конце 1990-х годов в виде таких приложений, как Winamp (1997), Audion (1999) и SoundJam (2000). К 1999 году в распространении было несколько десятков бесплатных нетривиальных визуализаторов музыки. В частности, MilkDrop (2001) и его предшественник «geiss-plugin» (1998) Райана Гейсса, G-Force Энди О'Мира и AVS (2000) Nullsoft стали популярными музыкальными визуализациями. AVS является частью Winamp и недавно был открыт с открытым исходным кодом , [5] а G-Force был лицензирован для использования в iTunes [6] и Windows Media Center [ нужна ссылка ] и в настоящее время является флагманским продуктом стартапа программного обеспечения Энди О'Мира. Компания СаундСпектр. В 2008 году в iTunes добавился визуализатор «Магнитосфера», созданный The Barbarian Group . [7]
Визуализация электронной музыки применялась с целью улучшить качество прослушивания музыки глухими и слабослышащими людьми . Ричард Берн, аспирант Бирмингемского городского университета , по состоянию на 2015 год исследует устройство, которое отображает подробную визуальную обратную связь с электронными приборами . Эти визуальные эффекты предоставят информацию об особенностях того, что воспроизводится, например, о высоте и гармониках звука. Это позволяет глухим музыкантам лучше понимать, какие ноты они играют, что дает им возможность создавать музыку по-новому. [8]
Исследователи из Национального университета Сингапура также создали устройство, призванное улучшить музыкальные впечатления глухих людей. Эта технология сочетает в себе музыкальный дисплей и тактильное кресло, которое объединяет звуковые качества музыки с вибрациями и визуальными образами, которые соотносятся с конкретными качествами музыки. На визуальном дисплее отображаются различные формы, которые меняют размер, цвет и яркость в зависимости от музыки. Сочетание этого визуального дисплея с тактильным креслом, которое вибрирует вместе с музыкой, призвано дать более полное представление о музыке людям с плохим слухом. [9]
Визуализация музыки также может быть использована в обучении глухих учащихся. Союз Купера в Нью-Йорке использует музыкальную визуализацию, чтобы научить глухих детей звуку. Они разработали интерактивную световую студию в начальной школе американского языка жестов и английского языка в Нью-Йорке. Он состоит из интерактивного настенного дисплея, на котором отображается цифровой результат, создаваемый звуком и музыкой. Дети могут своим движением вызывать игру на инструментах и наблюдать визуальную обратную связь от этой музыки. Они также могут увидеть стену «говорящего цветка», в которой каждый цветок может преобразовывать звук в свет в зависимости от определенных частот звуков. [10]
