실시간 AI 디퓨전 파사드 — 관객 반응으로 건물 외벽이 그려지는 셋업 비하인드

The pre-rendered era of media facades is over. Walls that respond — generating images in real time from audience input. This is what I'm building now.

미디어 파사드 제안서에서 가장 많이 보이는 단어는 '몰입감'이다. 그런데 정작 벽은 관객이 오기 전에 이미 완성된 영상을 틀고 있다.

그 모순이 계속 마음에 걸렸다.

요즘 나는 AI 디퓨전 모델을 TouchDesigner에 연결해 파사드가 실시간으로 이미지를 생성하는 구조를 연구하고 있다. StreamDiffusion 기반으로 관객의 입력 — 움직임, 위치, 반응 — 을 생성 조건으로 삼는 셋업이다.

기존 방식과 결정적으로 다른 점은 하나다. 완성된 파일이 없다. 벽이 매 순간 처음 보는 이미지를 만든다.

발주처 관점에서 이건 단순한 기술 업그레이드가 아니다. 납품 구조 자체가 달라진다. 영상 파일 대신 생성 시스템을 받는 셈이고, 운영·업데이트 방식도 바뀐다. 콘텐츠 제작 비용이 반복 발생하지 않고, 공간이 열릴 때마다 다른 경험을 낼 수 있다.

아직 리서치 단계다. 실시간 생성이 대형 파사드 스케일에서 안정적으로 작동하는지 — 레이턴시, 해상도, 하드웨어 부하 — 검증하는 중이다.

" 미리 만든 것을 보여주는 공간과, 지금 만드는 것을 보여주는 공간은 관객이 서 있는 이유부터 다르다."

사전 제작 영상이 기본값인 파사드 시장에서, 실시간 생성 구조가 하나의 표준이 될 수 있을지 — 지금 그 가능성을 직접 확인하고 싶다.