촬영장에 못 돌아가는 독립 영화 제작자를 위한 VOID 모델 활용법
makedream2026년 4월 30일
0
컴퓨터/소프트웨어
Comments (0)
Log in to leave a comment
No posts yet
makedreammakedreamLog in to leave a comment
No posts yet
넷플릭스 연구진이 내놓은 VOID 모델은 단순히 사람을 지우는 도구가 아닙니다. 객체가 사라진 자리에 남은 물체가 중력에 따라 어떻게 움직여야 하는지 그 물리적 인과관계를 계산합니다. 주연 배우가 갑자기 하차했거나 저작권 문제가 터졌는데 재촬영할 돈은 없는 독립 영화 현장에서 이 기술은 말 그대로 생명줄입니다.
VOID 모델은 비디오 프레임 사이의 연속성을 챙기느라 메모리를 엄청나게 잡아먹습니다. 집에서 쓰는 RTX 4090의 24GB VRAM으로는 어림도 없습니다. 최소 40GB 이상이 필요하니 수천만 원짜리 워크스테이션을 사는 대신 RunPod이나 Lambda Labs에서 인스턴스를 빌려야 합니다. 2026년 기준 H100 PCIe 모델은 시간당 2달러 중반대에 빌릴 수 있습니다. 비싸 보이지만 재촬영 비용에 비하면 공짜나 다름없습니다.
세팅은 30분이면 끝납니다. RunPod 대시보드에서 PyTorch 2.2.0과 CUDA 12.1이 포함된 템플릿을 선택해 인스턴스를 만듭니다. 터미널에서 apt-get install ffmpeg를 실행하고 공식 저장소를 복제한 뒤 종속성을 설치하면 준비 완료입니다. 가중치 파일은 반드시 네트워크 볼륨에 올리십시오. 인스턴스를 껐다 켤 때마다 기가바이트 단위의 데이터를 다시 받는 데 들어가는 시간과 비용을 아껴야 합니다.
사람 손으로 일일이 외곽선을 따는 로토스코핑은 지옥입니다. VOID 모델은 0(삭제 대상)부터 255(배경)까지 값을 나누는 4단계 쿼드 마스크 구조를 쓰는데, 이걸 수동으로 그릴 필요는 없습니다. 다빈치 리졸브의 매직 마스크 데이터를 추출해 변환 스크립트를 돌리면 작업 시간의 80%가 사라집니다.
다빈치 리졸브에서 주 객체와 영향권 객체를 별도 노드로 마스킹하고 PNG 시퀀스로 뽑습니다. 그다음 FFmpeg 스크립트를 써서 주 객체 마스크를 검정색(0)으로, 영향권 마스크를 회색(127)으로 할당합니다. 두 영역이 겹치는 경계면에는 진회색(63) 필터를 적용해 최종 쿼드 마스크 영상을 합칩니다. 이렇게 하면 인물이 들고 있던 컵이 인물 삭제 후 바닥으로 떨어지는 궤적을 AI가 알아서 그려냅니다.
인페인팅 결과물은 가끔 너무 깨끗해서 문제입니다. 주변은 거친 필름 느낌인데 지워진 자리만 포토샵 한 것처럼 매끈하면 관객은 금방 눈치를 챕니다. VOID의 2패스 시스템이 흔들림을 잡아주긴 하지만, 원본 영상의 노이즈 입자까지 복제해주지는 않습니다.
이 이질감은 원본 영상의 깨끗한 지점에서 노이즈 프로파일을 따와서 해결합니다. 다빈치 리졸브의 필름 그레인 노드를 열어 원본 소스의 입자 크기를 분석하십시오. 그다음 동일한 설정값을 가진 인공 그레인을 마스크 영역에만 오버레이로 얹습니다. 루마 키를 써서 중간 톤에 그레인이 더 맺히게 조절하면 AI가 만든 영역과 실제 촬영본의 경계가 완전히 사라집니다.
배경이 복잡하면 AI가 가끔 물체의 형태를 뭉개버리는 오류를 냅니다. 이럴 때는 VOID 출력값을 정답이라 믿지 말고 스테이브 디퓨전(SDXL)을 섞어 쓰는 하이브리드 전략이 필요합니다.
오류가 심한 프레임만 따로 추출해 SDXL로 배경 광원을 맞춘 정답 스틸 컷을 만듭니다. 이 수정된 이미지를 EbSynth 같은 도구에 넣어 영상의 움직임 벡터에 따라 전체 시퀀스에 질감을 입힙니다. 마지막으로 RIFE 기술로 프레임을 보간하면 툭툭 끊기던 움직임이 부드럽게 연결됩니다. AI가 친 사고를 수동으로 수습하는 과정이지만, 결과물은 프로덕션 수준의 안정감을 갖게 됩니다.
클라우드 비용은 초 단위로 돈이 나갑니다. 무턱대고 4K 렌더링부터 돌리는 건 예산 낭비입니다. 먼저 RunPod의 스팟 인스턴스를 잡으십시오. 언제든 꺼질 수 있는 대신 온디맨드보다 70% 저렴합니다.
본격적인 작업 전에 480p 저해상도로 1패스 추론부터 돌려봅니다. 제거 대상의 경계면이 새지는 않는지, 주변 사물의 움직임이 물리적으로 말이 되는지 체크리스트를 만들어 확인하십시오. 테스트 결과가 확실할 때만 비싼 H100의 출력을 최대로 높여 최종 고해상도 렌더링을 가동합니다. 효율을 따지지 않는 기술은 독립 영화 제작자에게 사치일 뿐입니다.