AI VFX

AI-VFXは、生成AIモデルを用いて作成または編集されるビジュアルエフェクトの総称です。NukeやAfter Effectsなどのコンポジットソフトウェアを基盤とする従来のVFXとは異なり、ここでは拡散モデル、Vision Transformer、フィードフォワードニューラルネットワークなどが、スタンドアロンツールまたはNLEのプラグインとして活用されます。

パイプライン上の位置づけ

AI-VFXは主にポストプロダクションで利用されます。典型的なタスクとしては、オブジェクト除去（ワイヤークレーン、ブームマイク、反射）、切り抜かれた被写体の背後のインペインティング、手作業によるフレームごとのロトスコープ作業なしでのロト、グリーンバックなしでの背景置換、既存のショットの再ライティング、シーケンス全体のスタイル転送などがあります。

ツール 2026

• Runway Gen-4 / Gen-4.5 — リファレンスからビデオ生成、マルチショットシーケンス、ネイティブ音声生成。
• Wonder Dynamics (Autodesk Flow Studio) — マーカーレスボディトラッキング + 自動キャラクター置換。
• Meta SAM 3 — ロトスコープ、画像/ビデオからの3Dオブジェクト生成、Playground経由で無料。
• Beeble Switch X — 生成的な再ライティング + 被写体の一貫性を保った背景スワップ。
• Netflix VOID — 物理演算を考慮したオープンソースオブジェクト除去、Apache-2.0ライセンス。
• NVIDIA Lyra 2.0 — 単一画像から歩行可能な3D世界へ、HuggingFaceでオープンウェイト公開。
• Topaz Video AI — アップスケーリング、フレーム補間、編集前のステップとしてのスタビライゼーション。
• DaVinci Resolve 21 — エディットページにネイティブ搭載された8つの新AIツール（Reshaper, Speech-Gen, IntelliSearch）。
• Adobe Firefly Video Editor — テキストベース編集、ジェネレーティブSFX、カラーモード。

撮影現場での実践

最も重要な変化はツールではなく、現場での規律です。後で背景を置き換える場合、ライティングの連続性がよりタイトである必要があり、緩いものであってはなりません。被写体のライティングは、最終的なコンポジット背景に合うように計画されるべきです。そうでなければ、最終結果はグリーンバックの切り抜きのように見えてしまいます。DP（撮影監督）は、ポストプロダクションで初めて考えるのではなく、将来のAI-VFXワークフローを念頭に置いて、主要なシーンを計画するようになっています。

実践からのヒント

• リファレンスフレームは常に撮影してください — 後で完全に置き換えられるプレートであっても。ライティング設定の5秒のリファレンスは、ポストプロダクションで数時間を節約します。
• 音声プレートも同様です。AIによる背景スワップでは、ルームトーンやウォラ（群衆の声）が忘れられがちで、サウンドの連続性のために不足することがあります。
• フレームレートの一貫性は必須です。AIツールは24fpsのシネマスタンダードで最もクリーンに計算されます。30/60/120fpsとの混合はトラッキングエラーを引き起こします。
• 出力フォーマットは事前に明確にしてください。ストリーミングには1080pで十分ですが、映画マスターには4K-DCIが必要です。一部のツールは内部的に低解像度でレンダリングしてからアップスケールしますが、これは大画面での上映で明らかになります。

歴史

前兆は2022年でした — Stable DiffusionがPhotoshopプラグインでのインペインティングを普及させました。2023年にはRunway Gen-2が初の量産可能なビデオツールとして登場し、それにPika 1.0が続きました。2024年はハリウッドのパイプラインへの進出をマークします。Industrial Light & MagicはWonder Dynamicsを採用し、ARRIはAIモジュールをワークフローツールに組み込み、OpenAIのSoraデモによってテキストからビデオへの変換がメインストリームの議論となりました。2025年にはSoraが失速し（2026年4月26日アプリシャットダウン）、市場はオープンソースモデル（Hunyuan, Wan 2.7, LTX-2）とクローズドAPIプレミアム（Veo 3.1, Kling 3.0, HappyHorse 1.0）を中心に再編成されます。