AI 做特效,到哪一步了?

2021-02-15 影視工業網

隨著全球影視產業逐步走向工業化、規模化和產業化,我們陸續看到《阿麗塔:戰鬥天使》、《盜夢空間》、《流浪地球》、《阿凡達》、《復仇者聯盟》等科幻電影因震撼的視聽感受、新穎的電影題材獲得票房、口碑雙收。

現今特效技術已被廣泛應用於各類電影動畫中,工業光魔、Weta 等世界頂級視覺特效公司及大型影視製作團隊,都已嘗試使用計算機圖形圖像技術(CGI)輔助製作一些高呈現難度的數字特效。CGI 讓影視特效創作得到技術保障,讓有視野與高度的藝術創作可以盡情發揮,也讓各類本身具有新穎主題和宏大世界觀的影視作品或遊戲的美學屬性得到更大程度的表達與傳遞。

「指環王 2:雙塔奇兵」最後聖盔谷之戰甘道夫率洛汗援軍衝下大斜坡與獸人士兵正面交鋒場面

數字特效的發展史可以看作是電影製作的技術發展史,在電影剛剛出現的那幾年,任何的視覺效果都是局限在相機內完成的工作,例如替換鏡頭,或簡單的幀分割技術。1896 年,法國著名魔術師及電影製片人、數字特效鼻祖、科幻電影先驅喬治·梅裡埃偶然發明了一種電影特效技術——停機再拍,仿佛可以通過控制攝像機來操控並改造畫面中的「現實」。隨後其創造的兩部畫面光怪陸離、劇情近乎夢幻的電影——「月球旅行記」與「奇幻旅程」,也作為科幻電影的坐標原點,開啟了人類對超現實主題電影與特效製作的無盡想像。

「月球旅行記」電影宣傳封面圖

進入 50 年代後,隨著計算機技術的發展,特效的製作也開始藉助計算機圖形學的知識,用電腦來生成圖像(CGI),這種技術到 70 年代後逐漸成熟,出現了像《星球大戰》這樣的經典特效電影。1985 年,迪士尼公司創造了第一個使用電腦繪製的動畫角色——年輕的夏洛克·霍姆斯的彩色玻璃人。

20 年之後,《指環王》和《阿凡達》的成功掀起了一場技術革命,數字虛擬角色的製作在電影當中開始靠動作捕捉技術來製作。隨著計算機技術的不斷發展,特效的製作開始走向數位化,從傳統的機內特效,特效化妝,光學洗印等物理特效手段發展至到現在的數字合成、數字繪景、流體動力學等電腦生成圖像。同時,隨著數據分析、計算機視覺、機器學習和深度學習等數據智能技術的不斷應用,提升了數字特效的自動化處理和分析的水平,賦予了數字特效更多的智能化屬性,進一步減輕了特效工作人員繁瑣的工作,降低了人力成本和時間成本。

《阿凡達》實地拍攝場面與虛擬攝像機實時預覽畫面對比

機器之心希望通過本報告《世界頂級電影特效公司都在讓 AI「接管」特效製作——數字特效中人工智慧技術的應用現狀及趨勢展望》,介紹現有機器學習算法在數字特效中的應用現狀、未來技術發展及落地應用趨勢,幫助做機器學習、影視製作等相關的特效製作人員、特效團隊、視效總監、電影導演,尋找機器學習技術應用的可行性,以及為新型影視的製作策略和特效技術開發提供參考。

全球影視產業逐步走向工業化、規模化和產業化。數字特效製作高人力成本、低生產效率的問題使得越來越多的特效工作者和特效技術開發團隊開始重視人工智慧技術的應用。在不斷研究與實踐中發現,計算機圖形圖像技術的應用可對視聽素材進行更高效率的剪輯、處理及合成。

現今工業光魔、Weta等世界頂級視覺特效公司及大型影視製作團隊,都已開始使用機器學習算法等人工智慧技術輔助製作一些高呈現難度的數字特效,增加了影視作品的視覺表達方式及效果。但同時人工智慧技術的應用也有相當大的局限性,例如特效算法模型參數需要大量實踐調試、人工智慧虛擬角色行為無法預測、鏡頭捕捉到的動作隨機性強造成特效動作失真或僵硬等問題。但隨著新興視聽技術、數據科學和新一代信息技術的不斷發展及融合應用,我們有理由相信數字特效產業將實現更快速的智能化發展。

作者 | 申一帆、樊曉芳


文章來自中國影視視效社群會員,歡迎大家點擊閱讀原文,加入社群與全國視效從業者一起交流成長! 


一、數字特效定義及製作流程

1. 數字特效的基本概念

數字特效又稱數字特技,指利用計算機圖形圖像技術製作虛擬視頻效果的影視編輯技術,包括前期的電影構圖、角色設計和製作中期的虛擬場景氣氛渲染以及後期處理等。數字特效被廣泛應用於電影特效、動畫製作、室內設計、醫療影像建模、工業仿真等領域。

在電影生產過程中,常會遇到一些拍攝難度高、成本費用、危險性非常大以及難於在現實生活中拍攝到的鏡頭。在傳統的電影特技中,特效的製作更傾向於用特技攝影、微縮模型攝影、電子模型特技、合成特技、特技化妝等方式來解決這些問題。在計算機介入到電影特技領域後,電影特技的後期製作能力大大增強,數字電影特效所包含的內容也更加廣泛和深入。

2. 數字特效的製作流程

3.數字特效的分類

特效從影視製作的應用過程和技法上可以分為兩部分,即前期拍攝使用的變速等特殊效果的特效和需要軟體進行大量後期處理的後期特效。

二、數字特效產業及市場現狀

1.數字特效產業市場規模

數字特效常被用於各類動畫、科幻主題影視作品中,也逐步被應用於生成更多創意題材的短視頻內容。2018年全球電影票房排名前十的影片中,特效片佔比90%,總票房達100億。在短視頻領域,目前國內主要短視頻平臺如快手、抖音、美拍,都新增了濾鏡特效等功能,降低用戶製作更具表現力及更多樣表現形式的內容的門檻,激發用戶創作想像力。

2.數字特效產業現狀

特效行業具有勞動力密集與資金密集的特點,人力、軟體、硬體成本分別佔據60%、10%-20%、20%-30%。從國外的特效行業來看,美國特效行業受到全球化衝擊,行業準入門檻變低,特效公司議價能力變弱。韓國特效行業在政府的扶持下強盛,走向國際化,向中國市場發展,但由於團隊規模小,進入美國市場較難。中國本土特效公司受益於中國影視產業進入精品內容驅動增長、內容生產工業化的行業紅利開始崛起,但與美國電影特效製作水平仍有差距。

3.人工智慧在數字特效製作中的應用優勢

機器學習和深度學習算法在動畫建模、渲染、視聽素材編輯合成等特效製作環節的應用,大幅增加了自動化操作比例,加速視覺特效製作周期,在節約人力物力的同時,增加特效藝術性。

三、人工智慧技術在數字特效製作中的應用


四、使用人工智慧技術製作數字特效的代表案例

1.《復仇者聯盟3》使用新的機器學習算法來推進人物角色面部表情捕捉過程:Digital Domain使用基於機器學習進行面部捕捉的新方法,採集演員細緻的面部掃描、跟蹤的數據,製作「滅霸」角色的表情,讓虛擬CG角色的表情特效可以更逼真反應角色細微的心理變化。

2. Weta公司使用基於深度學習算法的工具推算阿麗塔面部肌肉的運動數據,繪製皮膚毛孔的細節:Weta在製作「阿麗塔」女主角CG形象時,使用了兩種基於深度學習的方法。一種是人臉跟蹤器使用深度學習,當由於拍攝原因臉部一部分被遮擋時,輸入面部運動的信息作為訓練數據,系統可以推算出一組可行的標記點。另一種用於製作阿麗塔皮膚,通過訓練數據產生正確尺寸和方向的皮膚和毛孔。

3.《至愛梵谷》藉助風格遷移算法製作具備梵谷作品繪畫要素畫面風格的《梵谷之眼》動畫影片:電影製作首先對原視頻進行單幀化處理,然後藉助Caffe人工智慧網絡及模型,利用風格遷移算法進行《梵谷之眼》視頻幀的分類鏡頭進行風格遷移製作動畫。

4.《指環王:護戒使者》 使用群體模擬系統製作大規模群體數字士兵及萬人打鬥場面:電影中大規模的群體數字士兵是由 Massive「虛擬環境群體模擬系統」製作出來的,可以實現數十萬個數字人之間真實的互動對抗,讓不同的個體在特徵與動作上產生千變萬化的差異。


五、人工智慧技術在數字特效製作中應用的局限性

1. 特效算法模型參數的確定需要大量實踐調試。

2. 使用神經網絡的動作捕捉技術生成的捕捉效果的隨機性強,生成的動作效果失真或僵硬。

3. 專用特效算法開發較難,對特效製作團隊專業性要求較高。

4. 特效算法應用對計算資源等環境因素要求較高。

5. 算法生成的虛擬角色的行為無法預測,可能與預設劇情相悖。

6. 神經網絡模型的建立需要大量無偏差但又能代表系統特性的數據,如何生成合理數據是神經網絡能否能準確代表真實系統的一個重要決定因素;缺少特效素材數據集。

六、數字特效產業智能化發展與人工智慧技術應用趨勢

產業智能化發展

1. 新興視聽技術與智能科學及新一代信息技術的融合應用驅動電影視覺表達多元化創新發展。

2. 電影大數據的應用推動電影攝製工藝和產業服務模式的優化升級。

3. 使用雲平臺進行數字特效協同製作及管理,提高工作流程及人力資源利用率。

技術應用

1. 機器學習算法應用於動作捕捉技術 ,提高人體肌肉動畫製作素材獲取效率及製作效果。

2. 使用機器學習算法驅動的代理人系統,可製作上萬人群的群集動畫效果,單個任務動作逼真化。 

3. 使用機器學習和及計算機視覺工具進行畫面信息自動發 提取及物體運動跟蹤。

特別鳴謝

江蘇原力電腦動畫製作有限公司

中國傳媒大學南廣學院 講師 夏聘婷

* 本文為「智周」系列報告「核心版」,相應「深度版」的推出計劃將在後續公布,敬請大家關注。針對「電影、動畫、短視頻中AI特效製作」這一主題,有哪些方向或主題,你希望在報告深度版中讀到更詳細的闡述與分析,歡迎留言,這將成為我們製作報告深度版的重要參考。

關於「智周」系列報告

機器之心「智周」人工智慧技術應用報告系列重點關注現有人工智慧技術應用較成熟且應用潛力較大的正在進行智慧升級的傳統行業及場景,逐行業、逐場景為產業用戶高效而不失深度地呈現不同人工智慧技術的產業落地現狀、企業案例、技術應用趨勢等。「智周」人工智慧技術應用報告系列包含核心版深度版兩個版本:

核心版濃縮精華分析內容至2頁內,覆蓋重要數據、分析結論及案例簡述,以供使用者高效系統地了解人工智慧技術在自身所關注產業內的潛在機會。

深度版在核心版的基礎上,包含詳盡的行業或場景痛點分析、技術解讀、落地案例詳解及資料附錄等,以供有深度研究需求的使用者進行深入探究。

==全文完==


相關焦點

  • Loom.ai利用人物靜態圖片打造逼真的3D虛擬頭像 保證像到連親媽都...
    Loom.ai利用人物靜態圖片打造逼真的3D虛擬頭像 保證像到連親媽都分不出來   你覺得他們還能戀愛嗎?
  • 德國小哥用AI拍大片!GPT-2寫臺詞、StyleGAN做特效、Replica來配音
    他首先用GPT-2生成了一段荒誕不經的劇本,接著用StyleGAN2製作了一些人物和視覺特效,還找到了一個超實用的語音生成工具,一起來看下效果吧!  國外一位網友Vlad Alex十分喜歡電影(Sunspring)《陽光泉水》,著迷於其荒誕的對白,一番搜索發現,劇本的創作者是Benjamin(班傑明)。
  • 【特效】做一個有靈魂的特效師
    最大的快樂就是做的東西被認可,最大的失敗就是做的東西被視為垃圾。雖然沒有了剛學時的激動,不過現在也會偶爾打打雞血。 多數人都會覺得特效是一個偏技術的工作,我會覺得很不爽,可又不得不承認,甚至有時候自己都懷疑,不會真的淪為一個軟體操作工,但是特效絕對不是點一下結算按鈕,那樣的廉價,所有計算機模擬的圖像,都是基於真實世界,來自我們周邊的生活做藝術化處理,當違背了這些,我們的主觀意識就會覺得假。
  • 創建三維頭像只需一張自拍,AI 技術即將開啟 3D 社交時代?
    開發背景Loom.ai 是視覺特效藝術家 Mahesh Ramasubramanian 和 Kiran Bhat 的研究心血。這兩人的來頭都不小。Mahesh Ramasubramanian 此前在好萊塢夢工廠(DreamWorks Studios)工作,為《怪物史瑞克》、《功夫熊貓》這樣的動畫電影擔任視覺效果督導。
  • 《逃離塔科夫》12口徑爆頭任務怎麼做 海岸線ai位置介紹
    海岸線爆頭任務需要擊殺12人,很多小夥伴可能不清楚在哪做好吧,今天小編給大家帶來逃離塔科夫海岸線ai位置介紹,快來看一下吧。海岸線爆頭任務需要擊殺12人,很多小夥伴可能不清楚在哪做好吧,今天小編給大家帶來逃離塔科夫海岸線ai位置介紹,快來看一下吧。
  • 光是螞蟻呀嘿還不夠,AI Studio帶你玩轉「照片活化」等視頻特效
    這個僅用一張照片、一段視頻就能做的魔性視頻,這兩天在某博、某抖和某手上瘋狂刷屏。傲嬌的表情配合洗腦的音樂,再加上各界大佬的傾情演繹,讓人看過一遍就再也忘不了,真可謂「失眠時,沒有一隻螞蟻是無辜的。」「螞蟻呀嘿」火爆全網,各式各樣的製作教程也隨之而來。
  • ai2020版本_完整版下載_Illustrator2020軟體中文版下載
    ai2020版本_完整版下載_Illustrator2020軟體中文版下載 2020
  • 《幻城》請來《權利的遊戲》特效公司做了一隻雪獅!
    為《幻城》開發CG角色的特效主要負責方是Pixomondo,這家特效公司之前做過《權力的遊戲》《雨果》《一步之遙》等,他們也是獲得過奧斯卡的特效公司, Pixomondo是去年9月份開始介入《幻城》劇組
  • 走進《一步之遙》背後視效團隊
    Jan聳聳肩,似乎對人們對特效的偏見有些無奈。PIXOMONDO的每個工作室會分享人才、資源、電影項目等等,有時候為了一部影片8個工作室會同時開工。「做《一步之遙》的時候我們啟用了5個。」PIXOMONDO視覺藝術家們是在《一步之遙》開拍前一年半就開始介入到電影項目中。Chris強調:「與以往的電影項目相比,這一次很不一樣。PIXOMONDO北京工作室擔任了主導性的角色,第一次。」在人們的印象中,特效仿佛只是電影生產線上的一個加工環節,如聖誕樹上的飾品,負責打造光鮮亮麗的外表即可。
  • 去角質or敷面膜,先做哪一步?有一種類型的面膜是例外!
    關於去角質和敷面膜,很多人都搞不清楚先後順序,到底是先做哪一步呢?小編今天就整理了一些平常比較多人想知道的問題,給大家解答解答~1、去角質or敷面膜,先做哪一步?很多女生都會這樣做,認為去完角質臉上的毛孔就乾淨了,吸收能力加強,直接開始敷面膜。其實這是不對的哦,因為剛去完角質的面部肌膚還是比較脆弱的,如果敷上具有高分子營養的面膜,會很容易出現過敏刺激的情況,反而會導致皮膚敷完效果變差。建議是去完角質後半天左右再開始敷面膜,護膚效果會更好,敷面膜之前要對肌膚進行深層清潔,讓肌膚更好地呼吸。
  • 肖楓安藍關係到了哪一步?奈何肖楓太靦腆,還是肖父道出了真相
    肖楓安藍關係到了哪一步?看到這裡,很多人都非常好奇肖楓和安藍的關係到底走到哪一步了,為何安藍會心甘情願的等待肖楓。而且在後面的劇情裡,可以判斷出,這是肖楓和安藍關係的進一步發展,只是因為這家面指的是肖楓媽媽做的面。
  • 拜登政府如何調整對華政策 會調整到哪一步?
    (原標題:南財快評:拜登政府如何調整對華政策,會調整到哪一步?)隨之而來的將是拜登如何調整對華政策以及會調整到哪一步,這需要中國特別引起重視加以研究。應對即將到來的拜登政府對華政策調整,我們需要提前做好準備。筆者認為,拜登政府上臺後首要應對的還是美國國內問題,這就是大規模動員應對新冠疫情以及與國會配合推出第二輪財政救助措施,稅收和醫保政策也會在川普政策基礎上做出顛覆式調整,由此需要耗費拜登政府巨大的精力。
  • 第五人格:「一步之遙」調整有深意,細思極恐有大事,有點恐怖!
    其實「一步之遙」本身並沒有什麼錯誤,作為一件紫掛特效本來就不是特別明顯,它的上架僅僅是為了襯託「摩根勒菲」金皮的特點,不過一向追求精益求精的玩家並不會這麼認為,價值268的禮包要做到物有所值,金皮本身的價格是物有所值,但是陪襯物品如此敷衍便不能接受。
  • 麥莉·克魯斯和科迪·辛普森的關係到哪一步了?準備結婚、生子嗎?
    在這段時間裡,他們都被很多謠言包圍著,從生孩子到結婚,各種都有。關於他們的奇葩消息層出不窮,那麼麥莉·賽勒斯和科迪·辛普森的關係到底進行到哪一步了。他們現在準備好安定下來了嗎?早在這對情侶開始浪漫戀愛之前,他們就已經是最好的朋友了。
  • AI特效火遍全網,真人秒變漫畫形象背後技術
    最近,有一款「變身漫畫」特效火了,從明星到路人,堪稱全民參與。只需一秒,便可看到二次元世界的自己,擁有水汪汪的大眼睛和白皙的皮膚,看上去元氣滿滿。 那麼如此有趣的特效,是怎麼做到的呢? 雖然目前並沒有看到專門對應此特效的研究,但是有關「風格遷移」的研究,並不是新鮮的事物。
  • 抖音證件照特效是哪一個在哪用 抖音怎麼證件照P圖教程
    抖音證件照特效是哪一個?想要P出好看的證件照用抖音怎麼進行操作呢?相信有不少朋友都被很喜歡火爆的證件照特效,自己也想要嘗試但是不知道在哪裡使用,下面小編就為大家帶來詳細的介紹,幫助大家順利的完成體驗。
  • 妹子體驗小米ai音箱
    今天我們要和大家分享一下  小米ai音箱。 今天這款小米AI音箱哪是小米於 2017年7月26日發布的一款智能音箱,售價299 元   發布之初號稱為 發燒友de新玩具  由小米電視、小米大腦、小米探索實驗室 聯合開發
  • 三國志13ai武將文官類威名技能效果解析,如何讓ai快速升級威名
    在上一篇文章中小編為大家詳細解說了ai武將的威名只有被動技能有效,主動技能則不會主動使用,然而並不是每個威名都均衡分配了被動技能。因此ai武將有的威名則完全不會發動技能,除了威名自帶的戰術外則相當於白板。今天小編為大家詳細解析一下ai武將文官類威名的價值,幫助大家選擇有威名技能的ai隊友,對於自創武將也可以設置ai能觸發技能的威名為理想威名。
  • 做視覺特效?
    (捂臉再說,主要是沒有用得到的地方嗎,建模渲染做動畫什麼的太高端了,用到的人還是太少了嘛。最近有剪輯需求,搜羅工具的途中了解到……嗯?Blender還能剪輯?有趣,要不,下載下來試試?你看這都是LTS版本了,不剁手一下嘛?
  • 這些特效科幻電影,你最喜歡哪一部?
    特效電影的出現,讓觀眾看到更震撼更真實有代入感的超級視聽場面,特效電影的特點是故事講得好不好並不重要,只需通過一個簡單易懂不需要費腦思考的故事,讓觀眾看電影過程中不需要思考太多的故事情節,利用特效以假亂真,刺激觀眾的神經,很多人也滿足於這種刺激的場景。今天就來分享一下這些特效電影,一起聊聊你最喜歡哪一部吧!