Les chercheurs de Netflix ont dévoilé une technologie révolutionnaire d'écran vert alimentée par l'IA
qui transforme la production d'effets visuels réalistes pour le cinéma et la
télévision.

Les chercheurs de Netflix ont dévoilé une technologie révolutionnaire d'écran vert

alimentée par l'IA qui transforme la production d'effets visuels réalistes pour le cinéma et

la télévision. Surnommée Magenta Green Screen (MGS), elle ne ressemble à aucune méthode vue auparavant. Cette

nouvelle approche offre des résultats plus rapides et plus précis, permettant aux réalisateurs de prévisualiser les

plans en temps réel pendant le tournage.

La lueur magenta pour relever d'anciens défis

La technologie de l'écran vert est utilisée depuis longtemps pour intégrer de manière transparente les acteurs dans

des arrière-plans virtuels ou préenregistrés. Cependant, elle est confrontée à des défis tels que les incohérences de couleur

causées par les éclaboussures de couleur verte, les ombres sur l'écran vert et la

complexité des objets fins comme les mèches de cheveux. Ces défis techniques ont

nécessité d'importants ajustements manuels, nécessitant souvent des heures pour perfectionner un seul plan.

En réponse à ces limitations, Netflix a développé la technique Magenta Green Screen

. Utilisant une combinaison de LED vertes brillantes comme arrière-plan et de

LED rouges et bleues orientées vers l'avant pour éclairer les acteurs, la nouvelle méthode de Netflix crée une

lueur magenta distinctive.

En capturant le canal vert pour l'arrière-plan et les canaux rouge et bleu pour

le premier plan, les monteurs peuvent remplacer le canal vert en temps réel,

plaçant facilement les acteurs dans des scènes alternatives tout en surmontant des obstacles comme les objets transparents

ou les mèches de cheveux.

Correction des couleurs assistée par l'IA

Cependant, un léger inconvénient de cette méthode est que les acteurs peuvent apparaître teintés de magenta

en raison de l'absence de canal vert. Pour y remédier, Netflix utilise l'intelligence

artificielle pour réintroduire toute la gamme de couleurs dans le premier plan.

Bien que ce processus d'IA fonctionne actuellement à un rythme rapide mais non en temps réel, des techniques

telles que l'approximation d'un canal vert par la moyenne des canaux rouge et bleu permettent aux

réalisateurs de surveiller efficacement les plans pendant le tournage.

Bien que l'industrie accueille favorablement les nouvelles avancées, des experts comme Drew Lahat de la société de production vidéo

Geiger Post avertissent que la technique Magenta Green Screen

implique plusieurs étapes complexes, qui pourraient ne pas être bien adaptées à la nature rapide

de la production cinématographique et télévisuelle. Elle devrait rivaliser avec d'autres technologies émergentes

comme les plateaux de production virtuels et convaincre les producteurs dans des scénarios

réels.

La technologie de l'écran vert a une riche histoire remontant au film de 1939 « Le Magicien d'Oz

». Cependant, le Magenta Green Screen de Netflix représente un bond en avant prometteur,

combinant l'innovation alimentée par l'IA avec des capacités de composition en temps réel, permettant aux

cinéastes de se concentrer sur l'excellence artistique tout en créant des productions visuellement époustouflantes.

Comment fonctionne la nouvelle technologie

En entraînant un modèle d'IA sur des séquences supplémentaires présentant le sujet du premier plan

filmé sous un éclairage blanc traditionnel, les chercheurs permettent au modèle de saisir l'

apparence prévue et d'éliminer efficacement la teinte après coup.

Les avantages de cette technique innovante vont au-delà de la vitesse et de la précision. Contrairement aux

approches conventionnelles, elle n'impose aucune restriction sur ce que les talents à l'écran

peuvent porter. Dans une séquence de test, une artiste porte gracieusement une superbe robe verte

et tient une bouteille en verre de la même teinte—chose remarquable, ni l'une ni l'autre ne disparaissent lorsque l'

arrière-plan vert est remplacé.

Cependant, chaque médaille a son revers, et la nouvelle approche

introduit un ensemble de nouveaux défis. La teinte magenta enveloppant l'ensemble du plateau peut

dérouter l'équipe, rendant difficile la visualisation et la prévisualisation précises des séquences sur

place. De plus, la technique manque actuellement de fonctionnalité en temps réel, contrairement aux

systèmes utilisés par les météorologues qui se fondent parfaitement avec les cartes de prévisions

lors des diffusions en direct.

Néanmoins, les chercheurs ingénieux sont déterminés à surmonter ces obstacles.

Ils développent activement des méthodes pour permettre la correction des couleurs en temps réel, ce qui

faciliterait les prévisualisations sur le plateau. Même si les résultats immédiats ne sont pas parfaits pour l'

équipe, les compromis consentis pourraient s'avérer payants si le produit final captive

le public avec un réalisme encore plus grand.