프로젝션 매핑은 건물 표면을 스크린처럼 활용해 빛과 영상을 입히는 기술입니다. 최근에는 역사적 건물 이미지를 바탕으로, 음악에 맞춘 조명 프로젝션 공연을 Omni AI로 생성한 사례가 공유됐습니다.1
이 사례에서 주목할 점은 단순히 “AI가 멋진 영상을 만들었다”가 아닙니다. 핵심은 영상 제작의 출발점이 달라지고 있다는 데 있습니다. 이제 제작자는 텍스트 설명만이 아니라 이미지, 음악, 영상 레퍼런스를 함께 넣고 원하는 연출을 대화하듯 구체화할 수 있습니다.
Omni AI는 무엇을 바꾸는가
Gemini Omni는 이미지, 오디오, 비디오, 텍스트를 함께 입력으로 받아 비디오를 생성할 수 있는 모델입니다.2 첫 공개 모델은 Gemini Omni Flash이며, Gemini 앱, Google Flow, YouTube Shorts에서 제공됩니다.2
이 구조는 프로젝션 매핑과 잘 맞습니다. 프로젝션 매핑은 공간의 형태, 조명의 움직임, 음악의 리듬이 함께 맞아야 설득력이 생기기 때문입니다. 예를 들어 건물 이미지를 기준으로 삼고, 음악 파일을 넣은 뒤, “비트에 맞춰 창문 조명이 켜지게 하라”는 식으로 지시할 수 있습니다. Google도 음악에 맞춰 조명이나 시각 요소를 동기화하는 프롬프트 예시를 제시했습니다.2
즉 Omni AI의 가치는 영상 생성 그 자체보다, 여러 입력을 하나의 연출 방향으로 결합하는 데 있습니다.
프롬프트 작성보다 중요한 것은 ‘연출 조건’이다
Omni를 사용할 때는 한 문장의 프롬프트만 잘 쓰는 것보다, 어떤 기준으로 결과를 통제할지 정하는 것이 중요합니다. Gemini Omni Flash의 입력은 텍스트 문자열, 이미지, 오디오, 비디오 파일을 포함합니다.3 따라서 다음 요소를 함께 준비할수록 의도를 더 명확히 전달할 수 있습니다.
기준이 되는 건물 또는 공간 이미지
원하는 조명 스타일이나 효과 레퍼런스
음악 또는 리듬 기준
카메라 움직임 여부
장면 길이와 컷 전환 방식
대사, 인물, 텍스트 등 제외할 요소
실제 공유 사례에서도 정적 카메라, 대사 없음, 하나의 긴 끊기지 않는 장면 같은 조건이 포함됐습니다.1 이런 조건은 결과물의 분위기뿐 아니라 활용 목적을 결정합니다. 공연 콘셉트 영상인지, 제안서용 시안인지, 숏폼 콘텐츠인지에 따라 필요한 제약이 달라지기 때문입니다.
자연어 편집은 제작 과정을 대화형으로 만든다
Omni의 또 다른 특징은 자연어 대화로 비디오를 편집할 수 있다는 점입니다.2 사용자는 처음 생성된 결과를 보고 “조명을 더 어둡게”, “효과를 더 느리게”, “카메라는 고정한 채 유지”처럼 이어서 요청할 수 있습니다.
중요한 점은 이 연속 편집이 이전 지시를 기반으로 누적된다는 것입니다.2 매번 처음부터 다시 만드는 방식이 아니라, 앞선 결정 위에 다음 수정을 쌓아가는 방식에 가깝습니다. 이는 영상 제작의 흐름을 바꿉니다. 제작자는 완성본을 한 번에 맞히려 하기보다, 콘셉트에서 시작해 점진적으로 연출을 조정할 수 있습니다.
또한 Gemini Omni는 편집 과정에서 캐릭터 일관성과 장면 맥락 유지를 목표로 하며, 중력, 운동 에너지, 유체 역학 같은 물리 현상 표현을 지원하도록 설계됐습니다.2 프로젝션 매핑에서는 빛이 표면을 따라 흐르는 방식, 움직임의 무게감, 장면의 연결성이 결과 품질에 큰 영향을 주기 때문에 이런 방향성은 특히 중요합니다.
어디에 실용적인가
Omni AI는 최종 결과물을 단번에 완성하는 도구라기보다, 빠르게 시각적 가능성을 탐색하는 도구로 이해하는 편이 현실적입니다. 특히 다음 작업에 유용합니다.
프로젝션 매핑 콘셉트 시안 제작
공연 또는 전시 제안서용 영상 초안
음악 기반 조명 연출 테스트
건축물 외관을 활용한 캠페인 아이디어 검토
숏폼 영상용 시각 효과 실험
핵심은 속도입니다. 기존에는 공간 이미지, 음악, 모션그래픽, 편집을 각각 별도로 다뤄야 했다면, Omni는 이 요소들을 한 번에 연결해 초기 방향을 빠르게 확인하게 해줍니다. 제작자는 더 많은 아이디어를 짧은 시간 안에 비교하고, 가능성이 높은 안을 선별할 수 있습니다.
결론: Omni AI는 영상 제작의 입력 방식을 넓힌다
Omni AI 사례가 보여주는 변화는 분명합니다. 영상 제작은 더 이상 “촬영 후 편집”만을 중심으로 움직이지 않습니다. 이제는 이미지, 음악, 영상 레퍼런스, 자연어 지시를 조합해 장면을 설계하고 수정하는 방식이 중요해지고 있습니다.
프로젝션 매핑처럼 공간과 리듬, 조명 효과가 결합되는 작업에서는 이 변화가 더욱 크게 체감됩니다. Omni AI를 잘 활용하려면 멋진 문장을 쓰는 것보다, 어떤 이미지와 음악을 기준으로 삼을지, 어떤 카메라와 장면 조건을 줄지, 어떤 연출 목표를 단계적으로 수정할지 정하는 것이 더 중요합니다.
결국 Omni AI는 제작자를 대체하는 도구라기보다, 연출 아이디어를 더 빠르게 실험하게 해주는 인터페이스에 가깝습니다.
1Omni AI Generates Dynamic Projection Mapping on Historic Building
이 노트는 보도·비평·교육·연구 목적으로 작성되었습니다. 저작권 문의가 있으시면 에서 알려주세요.