AI와 관객의 실시간 상호작용을 구현한 플로우 프로젝트

움직임과 인공지능이 만나는 새로운 생성 예술의 경험

플로우는 기존 AI 아트 생성기의 한계를 고민하는 과정에서 탄생했다. 디자이너 유밍 첸(Yuming Chen)은 단순히 키워드 입력에 의존하는 방식을 넘어, 관객이 직접 몸의 움직임으로 작품에 영향을 미칠 수 있는 방식을 고안했다. 이를 위해 빠른 생성 속도를 자랑하는 대형 AI 모델을 Touch Designer에 도입하고, 카메라를 통해 관객의 동작을 실시간으로 감지하여 작품에 반영한다.

이 프로젝트의 가장 큰 특징은 관객과 AI 예술 작품 간의 실시간 인터랙션이다. 관객이 이미지 설명을 입력하면, AI가 즉시 화면에 작품을 생성한다. 이후 관객이 손을 흔들거나 몸을 움직이면, 이 움직임이 데이터로 변환되어 생성된 이미지에 실시간으로 영향을 준다. 정적인 이미지에 머물지 않고, 관객의 참여로 끊임없이 변화하는 동적인 예술 경험을 제공한다.

플로우의 기술적 구현에는 Python으로 작성된 Touch Designer 플러그인이 사용된다. 이 플러그인은 대형 생성 모델의 API와 연결되어 이미지를 받아오고, 파티클 등 다양한 시각 효과를 적용한다. 또한 카메라 포트를 통해 관객의 움직임을 실시간으로 캡처하고, 이를 Touch Designer 내 데이터로 변환해 이미지 효과에 반영한다. 실시간 반응성과 부드러운 인터랙션을 위해 500×500 해상도의 이미지를 생성하며, 초당 약 10프레임의 속도를 유지한다.

플로우 개발 과정에서 가장 큰 도전은 대형 AI 모델과 디지털 창작 툴인 Touch Designer의 결합, 그리고 관객과의 상호작용을 얼마나 자연스럽고 매끄럽게 구현할 수 있는가였다. 실시간 생성을 위해 이미지 품질을 일부 희생해야 했으나, 디지털 아트 기법을 활용해 시각적 완성도를 높였다. 이를 통해 관객은 기다림 없이 즉각적으로 AI 예술과 소통할 수 있다.

이 프로젝트는 2025년 A' Generative, Algorithmic, Parametric and AI-Assisted Design Award에서 실버상을 수상하며, 창의성과 기술적 완성도를 인정받았다. 플로우는 AI 예술의 대중화와 새로운 예술적 경험의 확장 가능성을 보여주며, 예술과 기술의 미래를 제시한다.