Effets visuels générés par IA générative — inpainting, suppression d'objets, rotoscopie automatique et compositing par diffusion depuis 2024.
Les VFX IA sont le terme générique désignant les effets visuels dont la création ou le traitement repose sur des modèles d'IA générative. Contrairement aux VFX classiques, qui s'appuient sur des logiciels de compositing tels que Nuke ou After Effects, les modèles de diffusion, les Vision Transformers et les réseaux neuronaux feed-forward sont utilisés ici — soit comme outil autonome, soit comme plugin dans le NLE.
Position dans le pipeline
Les VFX IA interviennent principalement en post-production. Tâches typiques : suppression d'objets (grues, micros perche, reflets), remplissage derrière des sujets découpés, rotoscopie sans extraction manuelle image par image, remplacement de fond sans écran vert, re-éclairage de prises de vues existantes, transfert de style pour des séquences entières.
Outils 2026
- Runway Gen-4 / Gen-4.5 — Référence vers vidéo, séquençage multi-prises, génération audio native.
- Wonder Dynamics (Autodesk Flow Studio) — Suivi de corps sans marqueurs + remplacement automatique de personnage.
- Meta SAM 3 — Rotoscopie, génération d'objets 3D à partir d'images/vidéos, gratuit via Playground.
- Beeble Switch X — Re-éclairage génératif + échange de fond avec cohérence du sujet.
- Netflix VOID — Suppression d'objets open-source avec prise en compte de la physique, Apache-2.0.
- NVIDIA Lyra 2.0 — Image unique vers monde 3D navigable, poids ouverts sur HuggingFace.
- Topaz Video AI — Mise à l'échelle, interpolation d'images, stabilisation comme étape de pré-montage.
- DaVinci Resolve 21 — Huit nouveaux outils IA natifs dans la page de montage (Reshaper, Génération de parole, IntelliSearch).
- Adobe Firefly Video Editor — Montage basé sur le texte, SFX génératifs, Mode couleur.
Pratique sur le plateau
Le changement le plus important n'est pas l'outil — c'est la discipline sur le plateau. Si un arrière-plan doit être remplacé plus tard, la continuité de l'éclairage doit être plus stricte, pas plus lâche. L'éclairage du sujet doit correspondre à l'arrière-plan de compositing ultérieur, sinon le résultat final ressemblera à une découpe d'écran vert. Les directeurs de la photographie planifient aujourd'hui leurs scènes clés en tenant compte du workflow VFX IA ultérieur, et non pas seulement en post-production.
Conseils pratiques
- Filmer toujours des images de référence — même pour des plans qui seront entièrement remplacés plus tard. Une référence de 5 secondes dans le setup d'éclairage permet d'économiser des heures en post-production.
- Idem pour les plans audio : le ton de la pièce et les voix d'ambiance sont souvent oubliés lors des remplacements de fond par IA, puis ils manquent pour la continuité sonore.
- La cohérence de la fréquence d'images est obligatoire. Les outils IA calculent le plus proprement à 24 images/seconde, standard cinéma ; les formes mixtes avec 30/60/120 images/seconde provoquent des erreurs de suivi.
- Clarifier le format de sortie à l'avance : le 1080p convient pour le streaming, le 4K DCI pour les masters de cinéma. Certains outils rendent en interne des résolutions plus basses et effectuent une mise à l'échelle — cela se voit sur un écran géant.
Histoire
Les précurseurs datent de 2022 — Stable Diffusion rend le remplissage dans les plugins Photoshop acceptable. En 2023, Runway Gen-2 devient le premier outil vidéo prêt pour la production de masse, suivi par Pika 1.0. 2024 marque le saut dans les pipelines hollywoodiens : Industrial Light & Magic adopte Wonder Dynamics, ARRI intègre des modules IA dans ses outils de workflow, et avec la démo Sora d'OpenAI, le texte-vidéo devient un discours grand public. En 2025, Sora s'effondre (arrêt de l'application le 26.04.2026), et le marché se réorganise autour des modèles open-source (Hunyuan, Wan 2.7, LTX-2) et des API premium fermées (Veo 3.1, Kling 3.0, HappyHorse 1.0).