Формы
- год
- 2014—2022
- тип
- series
- инструменты
- openFrameworks, OpenCV, Unreal Engine, Max/MSP
- роль
- author
- описание
- Метапроект: форма, контур и звук — от «О духовном в искусстве» Кандинского к экспериментам с компьютерным зрением и AV-инсталляциям.
«Сама форма, даже если она совершенно абстрактна и подобна геометрической, имеет свое внутреннее звучание, является духовным существом с качествами, которые идентичны с этой формой»
В. В. Кандинский — О духовном в искусстве
Исходной точкой исследования было произведение О духовном в искусстве Кандинского.
Используя компьютерное зрение, удаётся детальнее анализировать изображение: распознавать объекты и следить за ними, выделять контуры и сравнивать формы, создавать картины на основе этих данных.
Основные методики: выделение палитры цвета · выделение формы для каждого цвета · анализ формы · анализ взаимодействия форм · синтез звука на основе полученных данных.
Реализовано несколько экспериментов, в том числе аудиовизуальные проекты.
Связанные работы
- FormsContours — контурное звучание (2014)
- FormsInteractions — взаимодействие форм
- Квадрат
- PROUN Forms — инсталляция, ПРОУН континуум (2016)
- «Цикл» — AV-перформанс с Soma (2015)
- FormsFlow CV Rounds
- FormsFlow CV Colors
Эксперимент 1. Контурное звучание
2014 · OpenFrameworks · Analog Synth
Последовательно проигрывая изображение по контуру, программа изменяет звук, учитывает прямые, повороты и углы. Эти данные содержат информацию об объёме, расположении объектов и плавности линий композиции.
Эксперимент 2. Звучание формы
2014 · OpenFrameworks
Поиск корреляции ощущения формы и звукового ряда в динамике. На входе — чёрно-белое изображение. Контурный анализ раскладывает форму на параметры, управляющие звуком.
Эксперимент 3. Эффект буба-кики
2014 · OpenFrameworks
Эффект Кёлера (1929) — соответствие между звуковой оболочкой слова и геометрической формой. Буба — округлая форма, низкое звучание; Кики — остроугольная, высокочастотный ряд. В AV-композиции звук следует за динамикой формы.
Эксперимент 4. Квадрат
2014 · OpenFrameworks · Max/MSP · Korg MS-20
Играть последовательно стороны квадрата. Линия — текущий угол поворота. Визуализация стала похожа на супрематическую композицию.
Эксперимент 5. Взаимодействие форм
2014 · OpenFrameworks · Max/MSP
- идеальное звучание изменяется от сопоставления с другими формами;
- оно изменяется также в том же самом окружении, если сдвинуть эту форму с её направления.
В. В. Кандинский — О духовном в искусстве
Forms (инсталляция)
2016 · AV-инсталляция · проекторы, сетки, датчик глубины · выставка ПРОУН континуум
AV-перформанс «Цикл»
2015 · совместно с Soma · «Цикл»
Синтез звука и изображения, где визуальный ряд участвует в создании музыки. Влияние проекции на звук — анализ простых геометрических форм с помощью компьютерного зрения.