撮影現場に戻れない独立映画制作者のためのVOIDモデル活用法
makedream2026년 4월 30일
0
Computing/Software
Comments (0)
Log in to leave a comment
No posts yet
makedreammakedreamLog in to leave a comment
No posts yet
ネットフリックスの研究陣が発表したVOIDモデルは、単に人を消すだけの道具ではありません。オブジェクトが消えた場所に残された物体が、重力に従ってどのように動くべきかという物理的な因果関係を計算します。主演俳優が突然降板したり、著作権問題が発生したりしたものの、再撮影する予算がない独立映画の現場において、この技術は文字通り「命綱」となります。
VOIDモデルはビデオフレーム間の連続性を維持するために、膨大なメモリを消費します。家庭用のRTX 4090の24GB VRAMでは到底足りません。最低でも40GB以上が必要なため、数千万ウォン（数百万円）もするワークステーションを購入する代わりに、RunPodやLambda Labsでインスタンスを借りる必要があります。2026年基準でH100 PCIeモデルは1時間あたり2ドル半ばで借りることができます。高く感じるかもしれませんが、再撮影の費用に比べれば無料も同然です。
セッティングは30分で終わります。RunPodのダッシュボードでPyTorch 2.2.0とCUDA 12.1が含まれたテンプレートを選択してインスタンスを作成します。ターミナルで apt-get install ffmpeg を実行し、公式リポジトリをクローンして依存関係をインストールすれば準備完了です。ウェイト（学習済み重み）ファイルは必ずネットワークボリュームにアップロードしてください。インスタンスを再起動するたびにギガバイト単位のデータを再ダウンロードする時間とコストを節約する必要があります。
手作業で一つずつ輪郭をなぞるロトスコーピングは地獄です。VOIDモデルは0（削除対象）から255（背景）まで値を分ける4段階のクアッドマスク（Quad Mask）構造を使用しますが、これを手動で描く必要はありません。DaVinci Resolveのマジックマスクデータを抽出して変換スクリプトを回せば、作業時間の80%が削減されます。
DaVinci Resolveで主要オブジェクトと影響圏オブジェクトを別々のノードでマスキングし、PNGシーケンスとして書き出します。次にFFmpegスクリプトを使って、主要オブジェクトのマスクを黒（0）に、影響圏のマスクをグレー（127）に割り当てます。二つの領域が重なる境界線には濃いグレー（63）のフィルターを適用し、最終的なクアッドマスク映像を合成します。こうすることで、人物が持っていたカップが人物削除後に床へ落ちる軌道を、AIが自動的に描き出します。
インペインティングの結果物は、時として綺麗すぎて問題になることがあります。周囲はざらついたフィルムのような質感なのに、消した部分だけフォトショップで加工したようになめらかだと、観客はすぐに違和感に気づきます。VOIDの2パスシステムがブレを抑えてくれますが、元の映像のノイズ粒子まで複製してくれるわけではありません。
この異質感は、元の映像のクリーンな箇所からノイズプロファイルを抽出することで解決します。DaVinci Resolveのフィルムグレインノードを開き、元のソースの粒子サイズを分析してください。その後、同じ設定値を持つ人工的なグレインをマスク領域にのみオーバーレイで重ねます。ルミナンスキーを使って中間トーンにグレインがより乗るように調整すれば、AIが作成した領域と実際の撮影素材の境界線が完全に消失します。
背景が複雑だと、AIが時々物体の形を崩してしまうエラー（モーフィング）を起こします。このような場合はVOIDの出力値を正解だと過信せず、Stable Diffusion (SDXL)を併用するハイブリッド戦略が必要です。
エラーがひどいフレームだけを別途抽出し、SDXLで背景の光源を合わせた「正解のスチルカット」を作成します。この修正された画像をEbSynthなどのツールに入れ、映像の動きベクトルに従ってシーケンス全体に質感を定着させます。最後にRIFE技術でフレームを補完すれば、カクついていた動きが滑らかにつながります。AIが起こしたミスを手動で収拾する工程ではありますが、仕上がりはプロダクションレベルの安定感を備えることになります。
クラウド費用は秒単位で課金されます。むやみに4Kレンダリングから始めるのは予算の無駄です。まずはRunPodのスポットインスタンスを確保してください。いつでも停止される可能性がある代わりに、オンデマンドより70%安く利用できます。
本格的な作業の前に、480pの低解像度で1パス目の推論を回してみます。削除対象の境界線がはみ出していないか、周辺事物の動きが物理的に筋が通っているか、チェックリストを作って確認してください。テスト結果が確実な時だけ、高価なH100の出力を最大に高めて最終的な高解像度レンダリングを実行します。効率を度外視した技術は、独立映画制作者にとって贅沢でしかありません。