撮影またはグレーディング中のリアルタイムコンポジット——VFXはライブ適用、事前レンダーなし。セット上での即座の修正が可能。
撮影現場に立ち、最初のテイクが完了したとき、コンポジット技術者はすでにビデオビレッジのステーションに座り、レイヤーをライブで組み立てています。これがオンラインコンポジットであり、VFX要素に対するフィードバックの速度を根本的に変えます。3週間後にカラーコレクションを待ち、さらに3週間後にコンポジットを待つのではなく、ここでは撮影中または撮影直後に最終的なレイヤーを確認できます。グリーンバックのキーイング、パーティクルエフェクト、3Dインサートなど、すべてリアルタイムまたは最小限の遅延で統合されます。
現場での実践は、聞くほど派手なものではありません。十分なGPUパワー(通常はQuadroまたはRTX構成)を備えた専用ワークステーション、Nuke、Fusion、または独自のリアルタイムエンジンなどの特殊なソフトウェア、そして何よりもカメラキャプチャとコンポジットリグ間の安定したデータ接続が必要です。ポイントは、DPとクルーがまだセットアップしている間に、グリーンバックでシャープネス、キーイング、ライティングが機能するかどうかをテストできることです。俳優が花瓶を持っていて、それが後でデジタルに置き換えられる場合、その位置、サイズ、シャドウが合っているかどうかをすぐに知ることができます。DCPでのサプライズはありません。
実践的な限界とワークフロー
オンラインコンポジットは、安定していて予測可能なショットで最も効果的です。製品プレースメント、デジタルプロップ、キーヤー補正、簡単なトラッキング作業などです。多くの動く要素がある複雑なシーンや、まだ大規模なカラーコレクションが必要な撮影では、リアルタイム処理では後で必要とされる品質が得られないため、厳しくなります。ここでは、オンラインコンポジットは最終レンダリングというよりはコントロールツールです。
ワークフローは通常次のようになります。生素材はカメラからライブで取り込まれ、RAW形式(またはProRes)でバッファリングされ、コンポジターはNukeでノード(ロト、キーヤー、トランスフォーム、3Dシンクなど)を適用し、モニターにプレビューが表示されます。品質が許容範囲内であれば、セットアップが記録され、後でポストプロダクションでフル解像度とタイムでレンダリングされます。何か問題が発生した場合は、2回目のテイクを行いますが、今回は希望ではなく、実際のフィードバックを得られます。これにより、ポストプロダクションでのイテレーション時間が大幅に短縮され、後から発生するVFX修正の数が削減されます。