Voy — арт-инсталляция, управляемая данными.
Voy позволяет всем участникам исследовать красоту компьютерных изображений, созданных на основе данных, с помощью предопределенных жестов рук в воздухе.
Что, если бы мы могли исследовать что-то прекрасное? Что-то волшебное, что скрыто в многомерном пространстве? Чтобы ответить на эти вопросы, мы хотели бы взять вас в небольшое путешествие и дать вам некоторое представление о нашем процессе.
Ранее в этом году нам позвонил старый друг из колледжа и пригласил нас принять участие в его фестивале искусства и культуры. Он хотел, чтобы мы создали что-то особенное. Основная идея заключалась в том, чтобы вдохновить всех посетителей фестиваля на участие и стать частью общего опыта.
Этот звонок также показал, что не было никаких ограничений в разработке идей или потенциальных решений. Мы были заряжены с первого момента и поражены возможностью.
Вооружившись ручкой и бумагой, мы немедленно приступили к творчеству и мозговому штурму на следующие пару дней. В это время мы говорим о подходящих стратегиях развития и будущих технологических тенденциях. Мы провели много исследований и начали создавать точную картину того, как все части могут сочетаться друг с другом. Одним из первых результатов того времени было то, что эта работа должна иметь возможность генерировать физические результаты, с которыми каждый участник строит эмоциональную связь.
Мы подумали о механизме печенья с предсказанием. Время от времени вы берете одно из этих печений, и вам действительно небезразлично, что написано на маленькой бумажке внутри. Может быть, эти слова крутятся у вас в голове весь день… Итак, если нам удастся добиться того, чтобы все участники задумались или хотя бы получили напоминание о прекрасном опыте, который у них был, хотя он уже закончился, дело сделано. Но так как мы руководствуемся визуально, в нашем случае только текст не работает. Какой-то приятный для глаз компонент не должен отсутствовать.
После всех проведенных нами исследований нам пришла в голову идея использовать преимущества машинного обучения и обработки изображений для создания уникального контента. Сама по себе эта тема уже требует большой работы, если вы хотите добиться неплохих результатов. К счастью для нас, мы нашли замечательный инструмент под названием RunwayML, который представляет собой механизм редактирования видео, основанный на машинном обучении.
С помощью Runway мы легко получили доступ к множеству предварительно обученных моделей StyleGAN2. Используя эти модели, мы создали множество компьютерных изображений, которые идеально соответствовали нашим потребностям. Визуальность создает общее осознание процесса его создания и вдохновляет на исследование его бесчисленных деталей, неизвестных форм, узоров и брызг цветов.
Основываясь на этих увлекательных и непредсказуемых формах, мы продолжали создавать нашу бумагу для печенья с предсказанием, наш сувенир. Как показано выше, наш сувенир состоит из изображения, дополненного вдохновляющим слоганом. Наконец, в самом низу находится руководящий принцип нашей художественной инсталляции.
Мыоткрываем. Мыизучаем. Мыучимся.
Мы ориентированы на пользователя и стремимся объединить несколько технологий для создания общего опыта. Поэтому мы хотели, чтобы все участники могли управлять и ориентироваться в нашей инсталляции просто руками. Никаких других физических устройств не требуется.
Особенно в темных условиях освещения мы должны были убедиться, что простота использования не снижается. Учитывая это требование, мы решили использовать инфракрасное отслеживание рук.
Используя этот вид отслеживания, мы ограничили заранее заданные жесты рук для управления. Есть 1. Открытая ладонь и 2. Сжатый кулак. Во время использования открытая ладонь влияет на направление воспроизведения изображений на экране. Крайнее правое положение означает игру в прямом направлении, крайнее левое — в противоположном направлении. Можно даже контролировать скорость воспроизведения. Высокая скорость воспроизведения означает более гармоничное отображение визуальных эффектов на экране. Чем дальше вы попадаете в середину зоны слежения, тем медленнее становится скорость. Эта механика работает и наоборот.
Если вам попалось что-то визуально привлекательное, можно получить более детальное представление, сжав кулак. Наконец, если вы очарованы тем, что видите на экране, и решили сделать это по-своему, снова сделайте первый клинч и дождитесь начала печати.
С точки зрения разработки, мы поддерживали чистоту и актуальность нашего технического стека. Выбор веб-технологий дал нам возможность развертывать однажды разработанное приложение в различных типах каналов. Например, мы можем реализовать это приложение в физической установке, ограниченной по месту и количеству участников.
Или мы можем сделать это же приложение доступным для многих людей в Интернете, независимо от времени и места. Чтобы получить общее представление о том, как все работает вместе, мы спланировали и смоделировали расположение всех компонентов нашей установки на месте.
Установка состоит из 60-дюймового монитора 4K, инфракрасного отслеживания рук, принтера и довольно мощного компьютера, а также самого приложения. Внешний вид отдельно стоящей стелы в основном вдохновлен произведением Modulor.
Эта работа предоставила нам несколько хороших ориентиров для определения фактической высоты и окончательного размещения датчика слежения за рукой. Его визуальность проистекает из ранее разработанного направления дизайна.
Наконец, тестирование всех функций было важной частью рабочего процесса. Мы должны были убедиться, что все работает так, как ожидалось. Особенно функциональность принтера. Поэтому мы много раз оценивали нашу работу и прошли множество итераций во время проектирования и разработки.
В течение фестивального дня у нас был плотный график и некоторые другие задачи, которые нужно было решить, прежде чем мы смогли, наконец, приступить к работе. Себастьян и я направились из Гамбурга, северной Германии, на Средний Запад страны за пару часов. К счастью, мы прибыли вовремя, чтобы внести последние коррективы и убедиться, что все работает правильно.
Были внесены окончательные корректировки, процедура тестирования завершена, и мы убедились, что все работает так, как ожидалось.
Как видите, размер контейнера как раз подходит для нашей установки. Кроме того, он достаточно велик, чтобы вместить только одного человека внутри и перед установкой.
В сложившейся ситуации это была обязательная процедура, и количество участников во время фестиваля было вполне управляемым.
В итоге нам всем было очень весело. Но самое главное, мы сделали эту работу для нашего старого друга по колледжу и его фестиваля искусства и культуры, который был очень доволен результатом!
Мы надеемся, что вскоре ситуация снова нормализуется, и мы все сможем начать наслаждаться искусством и культурой более гармонично и непринужденно.
Будьте в курсе ✌
Твиттер:
https://twitter.com/tmjns92
https://twitter.com/Sebasti20083087
Больше изображений:
https://vimeo.com/user125935172
Ссылки:
https://runwayml.com/
