Netflix の研究者たちは、AI を活用した画期的なグリーンスクリーン技術を発表した。
これは映画やテレビ向けのリアルな視覚効果制作を変革する。
Netflix の研究者たちは、画期的なグリーンスクリーン技術を発表した。
AI を活用し、映画やテレビ向けのリアルな視覚効果制作を変革する。
Magenta Green Screen（MGS）と呼ばれるこの技術は、これまでのどの方法とも異なる。この
新しいアプローチは、より高速で正確な結果をもたらし、監督が
撮影中にショットをリアルタイムでプレビューできるようにする。
古くからの課題に挑むマゼンタの輝き
グリーンスクリーン技術は、俳優を仮想または事前録画された背景にシームレスに統合するために長年使用されてきた。しかし、緑色の色かぶりによる色の不一致、グリーンスクリーン上の影、髪の毛のような細かい物体の複雑さといった課題に直面している。これらの技術的課題は、多くの手作業による調整を必要とし、1 ショットを完璧にするのに何時間もかかることも少なくない。
こうした制限に対応するため、Netflix は Magenta Green Screen 技術を開発した。背景に明るい緑色 LED を使用し、俳優を照らすために前方に向けた赤と青の LED を組み合わせることで、Netflix の新しい手法は特徴的なマゼンタの輝きを生み出す。
背景の緑チャンネルと前景の赤・青チャンネルをキャプチャすることで、編集者は緑チャンネルをリアルタイムで置き換え、透明な物体や髪の毛といった障害を克服しつつ、俳優を別のシーンに容易に配置できる。
AI による色補正
しかし、この手法のわずかな欠点は、緑チャンネルがないために俳優がマゼンタがかった色に見える可能性があることだ。これを補正するため、Netflix は人工知能を使用して前景に全色域を再導入する。
現在の AI 処理は高速だがリアルタイムではないが、赤と青のチャンネルの平均から緑チャンネルを近似するなどの手法により、監督は撮影中にショットを効果的にモニタリングできる。
業界は新たな進歩を歓迎しているが、映像制作会社 Geiger Post の Drew Lahat 氏などの専門家は、Magenta Green Screen 技術には複数の複雑な工程が含まれ、映画やテレビ制作の速いペースには適さない可能性があると警告する。この技術は、バーチャルプロダクションスタジオのような他の新興技術と競合し、実際の制作現場でプロデューサーを納得させる必要があるだろう。
グリーンスクリーン技術は、1939 年の映画『オズの魔法使』にまで遡る豊かな歴史を持つ。しかし、Netflix の Magenta Green Screen は、AI 駆動の革新とリアルタイム合成能力を組み合わせ、映像制作者が芸術的な卓越性に集中しながら視覚的に素晴らしい作品を生み出すことを可能にする、有望な飛躍を示している。
新技術の仕組み
従来の白色照明下で撮影された前景被写体の追加映像で AI モデルを訓練することにより、研究者はモデルに意図された外観を把握させ、後処理で効果的に色かぶりを除去させる。
この革新的な技術の利点は、速度と精度だけにとどまらない。従来の手法とは異なり、画面に映るタレントの服装に制限を課さない。テストシーケンスでは、アーティストが見事な緑のドレスを優雅に着こなし、同じ色合いのガラス瓶を手にしているが、注目すべきことに、緑の背景が置き換えられてもどちらも消えない。
しかし、良い面だけではない。新しいアプローチには新たな課題も伴う。セット全体を包むマゼンタの色合いは、現場のスタッフを混乱させ、正確な映像の視覚化やプレビューを困難にする可能性がある。さらに、この技術は現在リアルタイム機能を欠いており、天気予報士が生放送で天気図とシームレスに合成するシステムとは対照的だ。
それでも、独創的な研究者たちはこれらの障害を克服する決意だ。彼らはリアルタイムの色補正を可能にする手法を積極的に開発しており、それが実現すればセット上でのプレビューが容易になる。現場のスタッフにとって即時の結果が完璧でなくとも、最終製品がより高いリアリズムで観客を魅了すれば、その妥協は報われるかもしれない。