Интерактивная инсталляция студии AkademiaDev, созданная для фестиваля «Ночь инноваций» и использующая более 40 нейросетей для визуализации данных в реальном времени, получила «золотую мышь» премии Tproger Awards.
Были отмечены лучшие технологические проекты, разработки и цифровые продукты в сфере IT. Для студии победа стала важным признанием нашей работы визуализации данных.
Проект отображал происходящее на площадке фестиваля в режиме реального времени. Инсталляция объединяла систему из более чем 40 нейросетей, которые анализировали поведение посетителей и преобразовывали данные в динамическую графику. Результаты обработки выводились на видеостену, формируя интерактивный дашборд происходящего.
По данным разработчиков, фестиваль посетили около 2,5 тыс. человек. Система собирала информацию с камер и других источников, обрабатывала ее и в режиме реального времени превращала в визуальные элементы, отражающие активность гостей. Одной из ключевых задач проекта стало обеспечение стабильной работы системы при обработке потоков данных и синхронизации нейросетевых моделей с визуализацией. Инсталляция стала частью медиапространства фестиваля и позволила посетителям взаимодействовать с цифровой средой.
Давид Салтхуцишвили, директор IT-продуктов AkademiaDev.
Подобные интерактивные решения могут применяться не только на фестивалях, но и в городской инфраструктуре и бизнесе.
Давид Салтхуцишвили, директор IT-продуктов AkademiaDev.
Использование нейросетей позволило в реальном времени анализировать характеристики посетителей и их перемещение в пространстве фестиваля. Алгоритмы компьютерного зрения определяли положение людей на карте площадки и анализировали визуальные параметры.
Интерактивная видеостена стала главным элементом визуального языка проекта. Для нее использовались медиа-арт-подходы, такие как point cloud и blob-tracking, благодаря которым данные превращались в динамические визуальные формы.
Захар Зотов, программист AkademiaDev.
Визуальная часть создавалась с использованием Ventuz, интеграция нейросетей и обработка потоков данных происходили в TouchDesigner с поддержкой Python и вычислений на GPU. Для компьютерного зрения использовались модели YOLO, которые выделяли лица и координаты людей в кадре, после чего данные передавались во фреймворк DeepFace для дальнейшего анализа.
Одной из ключевых задач команды стало создание архитектуры, способной обрабатывать большие объемы данных без задержек.
Алексей Полищук, разработчик AkademiaDev.
Отдельной задачей стало корректное определение уникальных посетителей, поскольку один человек мог попадать в кадр несколько раз. Для этого разработчики использовали фильтрацию данных по схожести записей, что позволило исключить дубли.
PR-директор AkademiaDev, Катерина Ундалова
Премия Tproger Awards отмечает технологические проекты и разработки в сфере IT, включая дизайн цифровых продуктов, инженерные решения и программные разработки. Для команды AkademiaDev эта награда стала важным признанием профессионализма и творчества, и мы искренне рады этому событию!