Reactable — это электронный музыкальный инструмент с настольным осязаемым пользовательским интерфейсом , разработанный в группе музыкальных технологий в Университете Помпеу Фабра в Барселоне , Испания, Серхи Жордой , Маркосом Алонсо, Мартином Кальтенбруннером и Гюнтером Гейгером. [1]
В конце 2010 года была выпущена мобильная версия Reactable для iOS. [2]
Reactable — это круглый полупрозрачный стол, используемый в затемненной комнате, который выглядит как подсвеченный дисплей. Размещая блоки, называемые осязаемыми , на столе и взаимодействуя с визуальным дисплеем посредством осязаемых предметов или кончиков пальцев, можно управлять виртуальным модульным синтезатором , создавая музыку или звуковые эффекты.
Существуют различные типы материальных объектов, представляющих различные модули аналогового синтезатора. Аудиочастотные VCO , LFO , VCF и секвенсоры являются некоторыми из наиболее часто используемых материальных объектов. Существуют также материальные объекты, которые влияют на другие модули: один называется радаром и является периодическим триггером, а другой называется тонализатором, который ограничивает VCO нотами музыкальной гаммы .
Сам стол является дисплеем. Когда материальный объект помещается на стол, появляются различные анимированные символы, такие как формы волн, круги, круговые сетки или размашистые линии. Некоторые символы просто показывают, что делает конкретный материальный объект, другие можно использовать кончиком пальца для управления соответствующим модулем.
Если на стол положить VCO, то к виртуальному синтезатору добавится модуль VCO. На дисплее между Tangible и «выходом» (яркое пятно в центре стола) появится волновая форма, а вокруг Tangible появится круг, позволяющий кончиками пальцев управлять амплитудой волновой формы. Кроме того, в этом примере Tangible можно вращать вручную, чтобы изменить частоту.
Размещение материального фильтра между VCO и выходом приводит к тому, что волновая форма VCO подключается к фильтру, а волновая форма фильтра подключается к выходу. Если материальное LFO размещается рядом с VCO, то появится волновая форма, соединяющая их, и LFO будет модулировать VCO.
Основной пользовательский интерфейс состоит из полупрозрачного стола. Под столом находится диктофон , направленный на нижнюю часть стола и выводящий видео на персональный компьютер . Под столом также находится видеопроектор , также подключенный к компьютеру, проецирующий видео на нижнюю часть столешницы, которую можно увидеть и с верхней стороны. Имеется звуковой движок на основе Pure Data и SuperCollider [3]
На столе размещаются материальные объекты, к нижней стороне которых прикреплены реперные знаки , которые видны через стол камерой. Реперные знаки представляют собой напечатанные черно-белые изображения, состоящие из кругов и точек в различных узорах, оптимизированных для использования reacTIVision. Затем reacTIVision использует реперные знаки, чтобы понять функцию конкретного материального объекта.
Большинство материальных объектов плоские, с одной реперной точкой на нижней стороне. Некоторые другие материальные объекты представляют собой кубы, с реперными точками, прикрепленными к нескольким сторонам, что позволяет этим материальным объектам выполнять несколько функций.
В настоящее время существует две версии Reactable: Reactable Live! и Reactable experience. Reactable Live — это уменьшенная, более портативная версия, разработанная для профессиональных музыкантов. Reactable experience больше похож на оригинальный Reactable и подходит для инсталляций в общественных местах.
Прямая трансляция видео, полученная с цифровой видеокамеры, обрабатывается программным обеспечением для компьютерного зрения с открытым исходным кодом reacTIVision, изначально разработанным Мартином Кальтенбруннером и Россом Бенчиной для проекта Reactable. [4] reacTIVision определяет декартово и вращательное размещение реперных точек на поверхности стола, а затем передает специально разработанный сетевой протокол на основе Open Sound Control под названием TUIO , который взаимодействует с реальным синтезатором и программным обеспечением визуализации, которое выводит данные на видеопроектор. reacTIVision также поддерживает отслеживание кончиков пальцев с помощью мультитач.
Reactable был представлен и исполнен на различных фестивалях и конференциях, таких как Ars Electronica , Sónar , NIME и SIGGRAPH . За эти годы команда Reactable провела более 150 презентаций и концертов в более чем 30 странах по всему миру. [5]
Исландская певица Бьорк , возможно, первый музыкант, за исключением избранных презентаций и демонстраций, использовавший Reactable в живом выступлении. В мировом турне Бьорк 2007 года в поддержку своего альбома Volta инструмент использовался в нескольких песнях, включая « Declare Independence »; первое живое использование инструмента Бьорк состоялось на музыкальном и художественном фестивале в долине Коачелла 27 апреля 2007 года.
Недавно разделившийся на две модели, Reactable Experience демонстрируется на многих выставках. Некоторые из них включают: INTECH , Discovery World , Museum of Science and Industry , Sub Mix Pro, ZKM и Game Science Center Berlin. [6]
Во время зимних Олимпийских игр 2010 года в Ванкувере Reactable был представлен на фестивале CODE . В течение всего февраля на этом мероприятии интерактивные медиа сочетались со спортом и музыкой.
В марте 2010 года Reactable был установлен в Discovery Place в Шарлотте, Северная Каролина, как часть выставки «Придумай это», которая открылась для публики 1 мая 2010 года.
С 2 июля по 1 октября 2010 года в Галерее науки Тринити-колледжа в Дублине (Ирландия) в рамках выставки «Биоритм» демонстрировался Reactable Experience .
Reactable есть в Центре наук Монреаля в Монреале, Канада.
В 2011 году группа Nero использовала Reactable в клипе на свой сингл «Promises».
С марта 2011 года Reactable экспонируется в Центре науки «Коперник» , Варшава, Польша. Он является частью выставки «Re:Generation» и доступен для использования посетителями.
Британская группа Coldplay использовала Reactable во время исполнения своей песни « Midnight » на фестивале iTunes в SXSW 11 марта 2014 года.
Reactable привлек большое внимание блогеров и был показан в крупных телешоу и популярных журналах. Журнал Rolling Stone Magazine заявил, что Reactable был самым популярным инструментом 2007 года. Устройство также получило несколько наград, включая Prix Ars Electronica Golden Nica for Digital Musics, MIDEM Hottest Music Biz Start-Up Award и две награды D&AD Yellow Pencil Awards в 2008 году. [5]
