실시간 AI 디퓨전 파사드 — StreamDiffusion+TouchDesigner로 관객 반응에 실시간 생성되는 미디어 파사드 셋업

The pre-rendered facade era is over. The wall now watches the audience and draws in real time — powered by StreamDiffusion + TouchDesigner. This is the setup behind it.

파사드 영상을 수개월 전에 완성해두고, 행사 당일 반복 재생하는 방식이 업계 표준처럼 굳어 있습니다.

그런데 여러 현장을 운영하며 반복해서 확인한 게 있습니다. 관객은 파사드 앞에서 평균 체류 시간이 짧습니다. 영상이 화려해도 마찬가지입니다. 자기와 무관하다는 걸 직감적으로 알기 때문입니다.

문제는 콘텐츠 퀄리티가 아닙니다. 구조 자체입니다.

StreamDiffusion은 AI 이미지 생성 속도를 실시간 수준으로 끌어올린 파이프라인입니다. 이걸 TouchDesigner와 연결하면, 카메라로 들어오는 현장 데이터가 AI 생성 루프에 직접 개입합니다. 관객의 움직임이나 현장 상태가 그 순간의 이미지를 결정하는 조건이 됩니다.

결과적으로 건물 벽은 미리 만든 영상을 '재생'하는 게 아니라, 지금 이 순간을 '반응'해서 그립니다.

발주처 입장에서 이건 단순한 기술 업그레이드가 아닙니다. 관객 체류 시간, 현장 공유율, 브랜드 각인 방식 자체가 달라지는 문제입니다. 사전 렌더 파사드로는 확보하기 어려운 영역입니다.

물론 현실적인 과제도 있습니다. 야외 환경에서의 프레임 안정성, 장시간 운영 시 생성 모델 일관성, 프로젝터 출력 조건 등 리서치 단계에서 먼저 검증해야 할 변수들이 있습니다. 이건 현장에서 실제로 부딪혀야 풀립니다.

지금은 그 셋업의 가능성과 한계를 동시에 보고 있는 시점입니다. 미디어 파사드의 다음 형식은 재생이 아니라 반응입니다.