Сryptographer

CRYPTOGRAPHER

ВЛАДЛЕНА ГРОМОВА, АРТЕМ ПАРАМОНОВ

2018

Cryptographer – это аудиовизуальный синтезатор, который соединяет разные времена, системы и пространства, комбинируя традиционную музыкальную теорию и звуковое искусство.

Форма инструмента напоминает некоторые особенности старого французского клавесина, но его работа основана на алгоритме, который преобразует визуальные данные в звуковую композицию в режиме реального времени. Алгоритм опирается на два важных допущения: сходство цветов и музыкальных интервалов (теория Кэтрин Любар) и наличие дальности (которая является основой визуального анализа человека), которая классифицирует порядок восприятия изображения.

Cryptographer позволяет создавать фортепианные композиции из небольших готовых изображений (открыток, цветных рисунков или фотографий) и небольших предметов (например, ключа или смартфона и т.д.) или из нового собственного рисунка, используя различные цвета для достижения определенного звукового эффекта. Метод перевода дает возможность издавать звуки из любых изображений и сравнивать звуки работ разных художников, дизайнеров и фотографов или любые другие виды городов, пейзажей, портретов, а также небольших предметов, таких как мусор из кармана и т.д.

Способ взаимодействия

Пользователь помещает изображение (или мелкие предметы размером не больше формата A5) на хорошо освещенные поверхности под камерой и нажимает кнопку воспроизведения. Через 20 секунд. композиция начинает издавать звук. Процесс распознавания изображения выводится на встроенный экран. Воспроизведение изображения останавливается, когда пользователь нажимает кнопку остановки.

Художники – Владлена Громова, Артем Парамонов
Программисты – Алексей Крутиков, Денис Базулев

Особая благодарность Мэтью Уэлтону, Колину Чилкоату, Полине Касьян, Андрею Лопаеву, Борису Базулеву, Сергею Тимофееву, Сергею Вдовину, Екатерине Мочалиной за помощь и поддержку в реализации проекта.

Владлена Громова – выпускница факультета истории искусств Европейского университета в Санкт-Петербурге, художник, куратор, со-основатель лаборатории интерактивного искусства и дизайна VALab.

Артем Парамонов – художник, со-основатель лаборатории интерактивного искусства и дизайна VALab.

VALaboratoty – команда художников, дизайнеров и инженеров:
– превращает идеи и информацию в уникальный запоминающийся опыт;
– просто и интересно демонстрирует сложные явления и процессы;
– исследует смыслы и значения, возникающие в процессе коммуникации человека с технологизированной окружающей средой.

Команда VA Lab открыта к сотрудничеству с музеями, художественными институциями, учеными, художниками и профессионалами из разных сфер для создания интерактивных инсталляций, научных экспонатов и художественно-исследовательских проектов в области, где пересекаются наука, искусство и технологии.

Проект представлен в рамках выставочной программы «Мера Хаоса. Наука как способ коммуникации». Узнать больше.

The Cryptographer is an audio-visual synthesizer that connects various times, systems and spaces by combining traditional musical theory and sound art.

A form of the instrument resembles some features of an old French harpsichord but its work is based on the algorithm that converts visual data to the sound composition in real time. The algorithm relies on two crucial assumptions: the similarity of colors and musical intervals (Katherine Lubar's theory) and the existence of the ranging (which is the basis of the human visual analyzer) that classifies the order of image perception.

The Cryptographer allows making piano compositions from small ready-made images (postcards, color drawings or photos) and little items (like a key or Smartphone etc.) or a new self-made drawing by using different colors to achieve a certain sound effect. The method of translation offers an opportunity to make sounds from any images and to compare the sounds of different artists, designers and photographers works or any other views of cities, landscapes, portraits and also small articles like garbage from the pocket etc.

The way of interaction

A user puts an image (or small things not larger than A5 format) on well-lit surfaces under the camera and presses the play button after 20 sec. the composition starts to produce sound. A process of the image recognition is output on a built-in screen. A playback of the image stops when the user presses the stop button.

Credits

Artists – Vladlena Gromova, Artem Paramonov
Programmers – Alexey Krutikov, Denis Bazulev

Special thanks to Matthew Welton, Colin Chilcoat, Polina Kasian, Andrey Lopaev, Boris Bazulev, Sergey Timofeev, Sergey Vdovin, Ekaterina Mochalina for their help and support with project implementation.

Various Artists' Laboratory of Interactive Art and Design is a creative association of artists, designers, engineers, and programmers, that started working in 2009. VALab is an open platform for interdisciplinary projects related to education, science, technology, and art. The main participants as well as the objects implementation base are located in Moscow. There are two major directions of VALab's work: Design (interactive exhibits) and Art (media-, techno-, science art). We have recently started elaborating on a new activity – the development of interactive exhibitions.

Founders: artists Vladlena Gromova and Artem Paramonov