用AI幫《蜘蛛人》、《星期三》做特效，影像新創MARZ怎麼為電影製作省下300倍時間？

2021年，口碑連連的電影《蜘蛛人：無家日》，以19億美元創下漫威蜘蛛人系列最高票房紀錄。不過因為內容涉及時間旅行，蛛蜘人製作團隊拍攝時面臨了一個問題：該怎麼讓多年前飾演八爪博士的演員Alfred Molina以及飾演綠惡魔的演員Willem Dafoe，看起來一如既往的年輕呢？

為漫威電影提供視覺效果的新創公司MARZ，透過生成式AI視覺特效工具──Vanity AI，成功解決了這個難題，重現了年輕的八爪博士和綠惡魔，好讓他們再次以年輕的姿態與蜘蛛人彼得帕克進行了精彩的對決。

MARZ在媒體《Fast Company》2023年電影和電視最具創新力公司名單中，擠進了前10名。它所開發的AI視覺特效工具Vanity AI，正在為電影界的視覺特效技術帶來更多可能性與創新的工作型態。

MARZ創辦人野心勃勃：結合AI技術，我們要打造世界最好的視覺特效公司。

MARZ的共同創辦人Jonathan Bronfman，從小就跟隨著父親在電影片場工作，耳濡目染的他，長大後曾到電視劇組中擔任製作助理，更創辦了自己的獨立影片製作公司JoBro Productions，不斷精進自己的電影製作技術。

期間，他遇到了擁有20多年視覺特效經驗的Lon Molna，兩人相交甚歡，並決定與擁有創業經驗的共同友人Matthew Panousis，攜手建立視覺特效公司MARZ。

看中了全球串流媒體大戰升溫、視覺特效激增的需求，MARZ開始研究開發將新科技帶入視覺特效的技術，他們成功結合生成式AI、電腦視覺和電腦圖形學，推出了AI視覺特效方案工具Vanity AI。MARZ執行長Matt Panousis分享，不同於過往人工手動校正，Vanity AI將能自動學習演員臉部特徵，並且透過高效率視覺優化，為電影的特效製作省下大量的時間與成本，因應當今影視界大量產製的需求。

在2018年成立的MARZ，早已是HBO《守望者》、Netflix《雨傘學院》、《星期三》以及迪士尼的《汪達與幻視》等著名影集的視覺特效團隊。在MARZ推出AI視覺特效方案工具Vanity AI後，更迅速於視覺特效界脫穎而出。MARZ執行長Matt Panousis在接受《Streets of Toronto》採訪時野心勃勃地說到：「視覺特效是需要不斷發展以應對新環境的挑戰的，我們希望打造出世界上最好的視覺效果公司。」

自動幫演員複製、貼上特效面具，MARZ為電影製作省下300倍時間

究竟Vanity AI有何魔力？

Matt Panousis進一步說Vanity AI的功能。他表示，過去特效團隊若要為演員進行臉部修復，都需要跟蹤演員各個鏡頭再逐一為每個鏡頭進行手工校正與細節修復，片長5秒鐘的修飾工作可能就需耗費超過10個小時的時間，並且極為昂貴。但現在透過Vanity AI，特效團隊只需要為演員的單一個臉部畫面創建年輕、修飾後的面具，Vanity AI就能自動學習演員的臉孔特徵，並在自動梳理該演員影片中的每個畫面後，全部貼上修飾的面具，而藝術工作者只需要確認每個面具的修飾程度，並做小部分微調即可。

「使用Vanity AI能讓電影的視覺特效專案比傳統方式省去50%的成本，並且比使用傳統視覺特效方式節省多達300倍的時間，將10幾天的工作縮短為幾分鐘。」Matt Panousis說到。

目前，MARZ已在超過27部好萊塢電影中使用Vanity AI技術，總共為他們服務的電影專案節省了將近800萬美元的特效成本，並將製作時程縮短了近100週的時間。不僅好萊塢，許多全球大型電視、電影公司，比如迪士尼、Apple TV、Netflix等都是MARZ的客戶。除了《蜘蛛人：無家日》之外，諸多著名影集像是Netflix《怪奇事務所》、《第一夫人》等都透過Vanity AI的視覺特效技術協助完成。

獲得530萬美元A輪募資，MARZ下一步將投入AI電影配音產品

MARZ已於2021年底已獲得了530萬美元（約新台幣1.6億元）的A輪募資。該投資由創投Round13 Capital領投，其他投資方包含了新創投資平台Harlo Equity Partners和Rhino Ventures。MARZ將這筆資金投入了Vanity AI的開發，同時用於招募更多優秀的團隊人才，至2023年團隊人數已達270多人。

除了Vanity AI，MARZ現階段也正致力於開發另一款AI電影配音產品LipDub，MARZ執行長Matt Panousis分享，他們期望透過AI技術，讓電影中不同語言的配音能更無縫貼合唇形，解決當今配音不同步的問題。Matt Panousis自信地說到：「我們希望在5年、10年後，成為AI視覺特效的全球領導者，我們相信我們是真的有能力做到這一點。」

參考資料：Business Wire、TechCrunch、RHINO