AI 경험이 전혀 없던 감독이 3주 만에 만든 단편 'Mork'

제 작업 이야기가 아니라, 다른 사람이 만든 결과물 이야기입니다. HiggsField에 새로운 영화 클립이 올라왔습니다. “Mork”라는 이 단편 영화는 매우 완성도 높은 영상을 보여주고 있습니다.

영상 링크: https://www.youtube.com/watch?v=F6MgT_Bdgz8

AI 경험이 없는 상태로 합류해서

영상을 만든 이는 칸 영화제 수상 경력이 있는 뮤직비디오 감독 말릭 젠거(Malik Zenger)로 알려져 있으며, 그는 AI 경험이 전혀 없는 상태로 불과 3주 전에 HiggsField 오리지널팀에 합류했습니다.

그의 목표는 AI 도구가 왕좌의 게임과 같은 고예산 실사 시리즈와 동일한 수준의 영화를 만들 수 있음을 증명하는 것이었습니다. 단순히 멋진 AI 샷이 아니라 내러티브의 깊이와 사실적인 시네마토그래피에 중점을 두었다고 합니다.

세계관을 관리하는 방법 — Figma 보드와 캐릭터 시트

복잡한 바이킹 세계를 관리하기 위해 말릭은 장면 카드로 구성된 거대한 Figma 보드를 만들었습니다. 각 카드는 장면 이름, 필요한 캐릭터, 그리고 구체적인 장소에 대한 상세한 설명까지 포함합니다.

전체 캐릭터 파이프라인은 Higgsfield Sour Cinema에 기반을 두고 있으며, Nano Banana Pro를 이용해 다운스트림을 세부 조정했습니다. 그리고 단순히 주인공에만 집중한 것이 아니라 주요 소품에 대한 구체적인 시트를 만들었습니다. 그것들을 사실적으로 묘사하는 데는 Seedance 2.0 모델을 사용했습니다.

영상에 등장하는 배경에도 공을 들인 것으로 알려집니다. 영상에 나오는 5~6개의 서로 다른 마을 환경을 중심으로 캐릭터들이 높은 사실성으로 움직이는 위치를 조정하며 많은 테스트를 진행했습니다. 환경의 일관성을 유지하기 위해 단일 장소에 많은 요소를 고정하는 데 신경을 썼습니다.

프롬프트와 음성

영상 제작 전반에는 Claude 파이프라인을 사용했다고 합니다. 그 과정에서 영화적 샷을 설명하면 Claude는 Seedance 2.0을 위한 프롬프트로 전환했고, 그 덕분에 더욱 사실적인 영상 생성이 가능했습니다. 또한 샷들 사이에서 동일한 위치에 여러 객체를 유지하기 위해 스크린샷-참조 워크플로우를 유지했습니다.

AI 캐릭터의 음성은 “영국식” 또는 “아일랜드 바이킹처럼 말하는”으로 묘사해 캐릭터 카드에 명시했습니다. 이로 인해 Higgsfield Seedance 2.0은 자동으로 일관된 음성 프로필을 유지할 수 있었습니다. 말릭은 AI에게 더 많은 “자유”를 부여하는 것이 성능을 과도하게 제한하려 할 때보다 더 현실적인 연기를 만든다는 것을 발견했습니다.

찍고 나서 편집하는 대신, 실시간 루프로

전체적인 편집 과정도 놀랍습니다. 모든 것을 촬영한 후 편집하는 전통적인 사고방식을 벗어나 말릭은 실시간 루프로 전환했습니다. 그는 샷을 생성한 후 즉시 타임라인에 삽입해 조명과 연속성을 확인한 뒤, 이전 샷을 기반으로 다음 샷을 생성했습니다. 이러한 라이브 피드백 루프를 통해 연속성 오류를 즉시 포착하여 실시간으로 대응할 수 있었습니다.

이 영상의 묘미는 비하인드 스토리 영상이 함께 제공되었다는 점입니다. 말릭은 AI 캐릭터들을 마치 실제 존재하는 배우들인 것처럼 개성을 지닌 가상의 현실을 창조했습니다. 주요 내러티브만으로는 달성할 수 없는 더 깊은 감정적 유대감을 만들어냈습니다.

비하인드씬 영상: https://www.youtube.com/watch?v=NAc2Uc0MbB8

감독은 이 22분짜리 Mork 영상에 이어 90분짜리 에피소드 제작에 들어간 것으로 알려졌습니다. 앞으로가 더욱 기대가 됩니다.