フォトグラメトリー

VFXショットに建物、彫像、車が必要で、それが現実に存在するのと同じようにピクセル単位で正確に画像に組み込みたい場合、フォトグラメトリがその問題を解決します。同じオブジェクトまたは場所の何百、時には何千もの写真をさまざまな角度から撮影します。撮影間には常に重複が必要です。その後、専門的なソフトウェア（RealityCapture、Agisoft Metashape、NeRFパイプライン）がすべての画像にわたる特徴点を認識し、それらを空間的に三角測量して、高精細な3Dメッシュとフォトリアリスティックなテクスチャを生成します。これらすべてが数時間から数日で完了します。

セットでの実施は実用的です：良質な一眼レフまたはミラーレスカメラを用意し、オブジェクトごとに最低100枚、できれば300〜500枚の写真が必要です。重要なのは、均一な照明、一定の焦点距離（ズームなし）、そして写真が実際に重複していることです。60〜80％が標準です。建物にはドローンを使用するチームもあれば、360度リグを使用してオブジェクトの被写体を撮影するチームもあります。コンピューターでの生データ処理時間は比較的安価です。400枚の写真から良いメッシュを2〜4時間で処理し、テクスチャのアンラップも含まれます。

フォトグラメトリが強力なのは、手動でのリトポロジーやディテールの手動ペイントが不要な点です。アルゴリズムは、傷、摩耗、素材の遷移を完全に自動的に捉えます。従来の3Dモデリング（アーティストが何日もかかる）と比較して、特に複雑な建築物や岩の形成のような有機的なオブジェクトの場合、大幅な時間を節約できます。コンポジットでは、メッシュを他の3Dアセットと同様に統合します：ライティング、シャドウパス、IDマット。

しかし、落とし穴もあります：反射や光沢のある表面（鏡面、クロム鋼）はソフトウェアを混乱させます。一時的な覆いが役立ちます。撮影中の速すぎる動きはゴーストアーティファクトを生成します。そして、動くオブジェクト（車両、人、風になびく植物）の場合、静的な再構築はすべてが静止している場合にのみ機能します。したがって、フォトグラメトリによる場所の計測には、通常、早朝または夜間に、歩行者がいない時間帯に数時間必要になります。

最新のパイプラインでは、フォトグラメトリはLidarやマッチムーブと密接に連携しています。競合するのではなく、補完し合います。Lidarが迅速な点群を提供する場所では、フォトグラメトリがテクスチャを提供します。そして、従来のモデリングがディテールのオーバーキルで苦労する場所では、カメラがそれを自動的に提供します。