跟綠幕說掰掰！Netflix用AI做虛擬大片特效，背後關鍵全靠兩種燈光

AI將取代傳統綠幕！Netflix如何讓視覺特效進化？

你也著迷於電影裡奪目的奇幻場景嗎？這些如夢似幻的情節都需要透過合成技術完成，傳統上將虛擬場景與演員融合的主流方式，是透過「綠幕」（Green Screen）這項去背合成技術，將畫面背景替換成設計的虛擬場景中。

綠幕技術被廣泛應用在影劇、遊戲製作及新聞台播報畫面上，許多經典電影如暮光之城、星際大戰、駭客任務、魔戒等，裡面的大型場景很多是藉由綠幕技術來製作完成的。

近年虛擬製作技術不斷推陳出新，AI（人工智慧）技術也被應用到合成技術上，綠幕技術被替代的機率，可能又更高了。

影音串流平台Netflix公布了一項名為「MGS」（Magenta Green Screen）的新技術，宣稱將成為影視產業特效後製技術的創新進展。

現在綠幕技術最大的痛點，是當畫面的前景中出現綠色元素，或有髮絲、透明物體等較精細的細節時，就會出現問題。為了解決這些問題，通常需要人工手動調整，或者在每個幀上進行繪製，是一個頗耗時的過程。

日前，Netflix的研究人員表示，MGS技術將能改善綠幕技術的缺點，並認為該技術將是AI在影視產業應用的創新進展。

MGS技術是什麼？

MGS的主要特色，是藉由在前景打上藍色和紅色的燈光、更有效率地將畫面裡的前景與背景精確區分，並透過人工智慧技術呈現比綠幕更生動、高品質的視覺效果，也能讓後製人員大幅提升場景編輯的效率。

MGS技術的主要使用場景，是在明亮的LED燈下進行拍攝，紅色和藍色LED燈會從正面照亮演員，產生洋紅色的光芒，這種照明配置創建了獨立的紅色、綠色和藍色通道（channel）——綠色通道僅記錄背景，使前景呈現黑色，而紅色和藍色通道僅捕獲前景，使背景呈現黑色。

透過AI，這項技術可以立即更換綠色通道，這意味著演員可以即時置於另一個場景的前景中。除此之外，MGS技術可以準確地處理透明物體和複雜的細節，如單獨的髮絲，這在綠幕技術上是一個挑戰。

AI的應用並不只在拍攝階段。由於採用MGS下的拍攝，可能會因為燈光產生洋紅色的主體影像，Netflix針對此透過AI讀取一般燈光照明下的演員影像，來還原前景的全光譜色彩。

影視產業如何看待這項新技術？

Netflix研究員Paul Debevec在採訪中表示，「好的工具可以讓很多事情變得更容易，讓創作工作更專注在創作上。」然而，一些影視產業內的人員，似乎對這項新技術的實用性持保留態度。

例如加州影片後製公司Geiger Post 的Drew Lahat，對該技術在快節奏的拍攝環境中的實用性表示疑問，並指出一些功能如AI校色環節無法即時完成，「MGS技術可能需要在一個完全可控的空間運行。」他說，「它還必須與虛擬製作等其他新技術競爭，並獲得製作人的支持。」

儘管如此，Netflix仍認為，MGS技術對Netflix的技術庫來說，是一個有力的加乘功能。Netflix的技術庫在此前已經採用深度學習來制定使用者體驗，成功地分析使用者並向觀眾推薦內容，獲得了正向的回饋，由人工智慧協作的精彩集錦、回顧和預告片，也成功增加了收看率。

Netflix這次推出的MGS技術，不僅要從觀眾的體驗上提升影像視覺效果，還著眼於提升幕後工作的效率與品質，不知道從事視覺特效相關的工作者，如何看待、採用這項新技術呢？