英偉達公司的人工智能技術正在成為好萊塢的下一個大明星,本周末,這部電影是去年奧斯卡金像獎提名的年度最佳影片中的兩部。
Netflix Inc.的“愛爾蘭人”和Marvel Studios LLC的“復仇者聯(lián)盟:殘局”廣泛依賴于AI技術來增強屏幕上看到的令人驚嘆的視覺效果。在這兩種情況下,制片人都使用了由Nvidia Quadro RTX圖形處理單元驅動的AI平臺,有效地將前者的演員Robert DeNiro,Al Pacino和Joe Pesci淘汰了數(shù)年,并在后者中創(chuàng)建了超現(xiàn)實主義的虛構超級反派Thanos。
當“愛爾蘭人”導演馬丁·斯科塞斯(Martin Scorsese)宣布老齡化的DeNiro,帕西諾和佩西將在他的黑幫殺手弗蘭克·希蘭(Frank Sheeran)的生活和罪行的故事中扮演主角時,引起了一些關注。畢竟,在70年代,他們不再是光彩照人了,而且在1960年代和1970年代,當電影大部分放映時,他們所描繪的角色都明顯年輕得多。
斯科塞斯知道他需要讓三人組看起來比實際年齡年輕得多,但是他對自己的化妝部門將他們改回30年代初的努力并不滿意。他還反對使用典型的動作捕捉標記或其他侵入式設備,這些設備會妨礙拍攝過程中的原始表演。
取而代之的是,他轉向視覺效果工作室Industrial Light&Magic及其計算機生成的圖像印章來倒轉時鐘。
ILM使用新的三攝攝影機使老化的演員恢復活力,該攝影機用于在舞臺上捕捉他們的表演。一臺是普通相機,另一臺是使用紅外線記錄3D幾何形狀和紋理。然后,ILM的技術人員使用名為FaceFinder的基于AI的特殊軟件,篩選了他們以前電影中成千上萬演員的圖像。
Nvidia解釋說,該工具定位的幀與攝像機的角度,取景框,照明和渲染場景的表情相匹配,因此ILM藝術家可以獲取相關參考,以與鏡頭中的每個幀進行比較。這些視覺參考用于完善為每個演員創(chuàng)建的數(shù)字雙打,因此可以將其轉換為適合電影中每個場景的年齡。
Nvidia媒體與娛樂事業(yè)部總經(jīng)理Richard Kerris在接受SiliconANGLE采訪時預測,由于AI解決了兩個關鍵問題:使演員看起來更年輕,以及創(chuàng)建和集成來自不同場景的燈光,因此AI在電影制作中將變得更加普遍。他說,對于“愛爾蘭人”,他們經(jīng)歷了40年的演員電影,并將其應用于CG角色。
至于“復仇者聯(lián)盟:殘局”,漫威使用AI技術的方式略有不同,它捕捉了演員喬什·布洛林的表演,并使用這些鏡頭為電影中的主要反派Thanos制作了數(shù)字動畫。
視覺效果工作室Digital Domain使用了它開發(fā)的名為Masquerade的機器學習系統(tǒng),對Brolin的表演,尤其是他的面部動作進行了許多低分辨率掃描,然后將這些表情轉移到Thanos的高分辨率網(wǎng)格上。
Nvidia說:“這項技術為VFX藝術家節(jié)省了時間,否則VFX藝術家將不得不手工制作微妙的面部動作動畫,以生成逼真的,動人的數(shù)字人。”
“此過程的關鍵是人物的情感表現(xiàn)的即時逼真的渲染預覽,這可以使用Nvidia GPU技術來實現(xiàn),” Digital Domain數(shù)字人類負責人Darren Hendler說。“我們現(xiàn)在使用Nvidia RTX技術來驅動我們所有的實時射線追蹤數(shù)字化人類項目。”