實時動作捕捉將HQ Trivia的主持人替換成樂高人物

2021-02-15 虛幻引擎

Animal Logic是《樂高蝙蝠俠大電影(The LEGO Batman Movie)》、《彼得兔(Peter Rabbit)》、《快樂的大腳(Happy Feet)》等優秀影片幕後的製作公司,前不久他們還製作了華納兄弟影業的《樂高大電影2(The LEGO Movie 2)》。為了幫助推廣這部新片,Animal Logic與日常開展直播智力競賽的熱門移動遊戲《HQ Trivia》進行了聯動。

「這個項目的目標基本上就是讓《HQ Trivia》與樂高攜手,」Animal Logic的製片技術主管Aidan Sarsfield評論說。「《HQ Trivia》是一個非常精彩的遊戲競賽節目,同一時刻有數以十萬計的人登錄參與。而事實證明,加入樂高迷你人物以後,這個數字還可以增加。」

Scott Rogowsky是《HQ Trivia》在2月份樂高推廣活動期間的主持人,也是這個遊戲的老玩家熟悉的人物。作為主持人業務的一部分,Rogowsky在每場競賽中都會出現在屏幕上,熱情地對題目、答案和玩家進行實時評論。

在新《樂高大電影》上映前夕的一期《HQ Trivia》特別節目中,Animal Logic構建了Rogowsky的樂高人物形象,復用了《樂高大電影2》中的資源進行綁定,並將它導入到虛幻引擎中。隨後Rogowsky穿上動作捕捉服,以他標誌性的熱情表演驅動迷你人物實時主持了這場競賽。

這期節目大獲成功,共有60多萬人參與了競賽。樂高Scott完全按照Rogowsky的知名方式與玩家互動,而且他還評論了自己的塑料化外形,並且實時響應了玩家要他做出特定面部表情和動作的要求。「我們得到了許多反饋,」Rogowsky評價道。「他們愛《樂高大電影》,他們愛樂高Scott。我們在這裡做到的效果真是讓人大開眼界。」

Rogowsky迷你人物是由一部iPhone X和一套動作捕捉服驅動的。蘋果自帶的ARKit面部跟蹤功能為虛幻引擎實時提供了Rogowsky的面部表情,而Xsens動作捕捉服提供了他的肢體動作。

與定位到人類角色的動作捕捉不同,Rogowsky的動作必須經過系統解譯,才能變成運動幅度限制嚴格得多的樂高迷你人物的動作。真人Rogowsky可以自由地活動他的手臂和腿,但是迷你人物玩具卻不能朝所有方向彎曲。例如,樂高人物的膝蓋不能打彎,手指也不能併攏。為了讓Rogowsky的動作適用於他的樂高形象,Animal Logic編寫了一個自定義解譯器,將Rogowsky的所有動作捕捉下來,並擬合到塑料人物的活動範圍中。

此外,對於面部表情,Rogowsky的迷你人物必須看起來像是手工動畫的結果。這意味著面部表情不能流暢地從一種過渡到另一種,而應該有階梯式的變化。Animal Logic開發了一套系統,它能識別特定的面部表情,並觸發表示這種面部表情的相應紋理。例如,當Rogowsky揚起一條眉毛時,顯示眉毛揚起的相應紋理就會實時替換到樂高Scott的面部。

Animal Logic非常注意使樂高Scott的塑料外觀準確地反映真實的迷你人物。樂高迷你人物角色的膚色一般都是黃色的,除非是根據真人製作。Rogowsky的迷你人物的膚色就和他本人一致,不過這種顏色也是樂高用於真實玩具的顏色之一。和電影中的重要角色一樣,Rogowsky的迷你人物的塑料身體也有準確的標記和指紋,仿佛真有一個孩子在操縱著他。

重要的差別就在於虛幻引擎,真人Rogowsky能夠讓樂高Scott實時說話和動作。相比之下,他們推廣的電影因為場景複雜,需要數小時才能製作出一幀畫面。

  

Sarsfield在評論這一過程時說道,「將所有這些五花八門的技術匯聚到一起,並且將各路人員集中到這個完全未經探索的領域之後,每一個參與者都非常享受這個過程。我認為任何具有探索性質的工作都會令我們大家受益。」

要創作你自己的精彩實時體驗,就趕快下載虛幻引擎並開始著手!


如需獲得更多虛幻引擎4的授權合作方式和技術支持,請發送郵件至EGC-Business@epicgames.com諮詢;

如果你想來 Epic 工作,掃描下方二維碼關注我們後點擊菜單欄按鈕「更多」並選擇「招聘」,即可了解我們的最新招聘信息。Epic Games 歡迎你的加入!

長按屏幕選擇「識別二維碼」關注虛幻引擎

「虛幻引擎」微信公眾帳號是 Epic Games 旗下 Unreal Engine 的中文官方微信頻道,在這裡我們與大家一起分享關於虛幻引擎的開發經驗與最新活動。

相關焦點

  • 虛幻引擎最新實時動作捕捉技術 影視創作又進一步?
    虛幻引擎最新實時動作捕捉技術顧名思義可以實時捕捉動作和表情,全程即時演算,即時生成CG。可以很清楚看到人物的皮膚細節、眼睛的轉動、說話的神態等。而且,這個紅衣服的高精度虛擬角色是以中國女演員姜冰潔為原型進行掃描,然後由另一個人驅動的!
  • ARKit+虛幻引擎+Xsense實時動捕,60萬人觀看樂高人偶節目表演
    Animal Logic的製片技術負責人Aidan Sarsfield評論說:「這個項目主要是關乎與樂高一起加入HQ Trivia。這是一個熱門的遊戲節目,有成千上萬的同時在線用戶,並一起參與至遊戲節目之中。事實證明,樂高人偶可以進一步增強遊玩體驗。」當《樂高大電影2》於今年二月在美國上映時,Scott Logowsky擔任了HQ Trivia的主持人。
  • 魔神動作捕捉技術的歷史演進
    魔神動捕技術歷史演進1995年開發出全球第一套光學動作捕捉系統1998 年開發出全球第一套光學模擬實時動作捕捉系統-Falcon北京電影學院的Falcon模擬系統完成了國內第一部運動捕捉製作的CG電影:《青娜》,而遠在美國的史克威爾公司製作了《最終幻想》
  • 動作捕捉系統發展與應用
    2、動作捕捉的原理是什麼?動作捕捉將演員的運動傳遞給數字角色。c、虛擬實境系統為實現人與虛擬環境及系統的交互,必須確定參與者的頭部、手、身體等的位置與方向,準確地跟蹤測量參與者的動作,將這些動作實時檢測出來,以便將這些數據反饋給顯示和控制系統。這些工作對虛擬實境系統是必不可少的,這也正是運動捕捉技術的研究內容。
  • 動作捕捉技術與我們並不遙遠
    在電影中使用了大量的動作捕捉技術和電腦特效技術為觀眾打造了一個近乎真實的潘多拉星,通過動作捕捉技術演員可以將自身的動作與電影中Na』vi人的動作同步做到動作流暢真實,讓觀眾消除對電腦特效產生的違和感。上個世紀初動畫師們通常會遇到一個非常令他們困擾的問題,就是通過繪畫描繪的人物動作不管怎樣都不會特別自然,生硬的動作導致了動畫行業在那段時間還是一個非常小眾的行業。受到小孔成像「轉描」繪畫形式的啟發,美國人馬克思·弗萊舍(Max Fleischer)發明了對近代動畫產業貢獻巨大的「轉描機」。
  • 大世界中的人物動作從何而來?動作捕捉實況曝光!
    大世界中的人物動作從何而來?動作捕捉實況曝光!鴉鴉這次發現的好東西 就是大世界動作捕捉視頻~ 鴉鴉今天就來給大家科普一下, 騰訊光子是如何利用 行業領先的動作捕捉技術 來還原在大世界中的一舉一動~
  • 詳解動作捕捉技術的分類
    紅外攝像頭一般採用RJ45接口,通過網線連接匯聚到交換機,再由交換機統一將數據轉發到計算機。整個系統如圖1-3所示。圖1-6 微軟公司的KinectFig.1-6 Kinect of Microsoft基本原理是首先找到圖像中移動的物體,然後會對移動的物體進行深度評估,識別出人體的部位,然後將其從背景環境中分割出來。分割之後要做的工作就是模式匹配,將其匹配到骨骼系統上。算法流程如圖1-7所示。
  • 愛迪斯通虛擬主播實時互動系統
    【虛擬主播實時互動系統】可提供臉部、手部、全身實時動作捕捉整合於單一系統,並擁有與Vroid 虛擬主播角色製作軟體串接功能,可快速提供虛擬角色一個能進行展示
  • 三維動作捕捉運動測量技術與8大場景應用解決方案
    動作捕捉系統主要應用於軍事、娛樂、體育、醫療領域,還可用於計算機視覺驗證和機器人技術。在電影製作和視頻遊戲開發中,該技術可記錄演員的動作,並將數字角色模型製作成2D或3D電腦動畫。動作捕捉在康復中的應用△ 產品設計及研發通過三維動作捕捉提供的精確分析、實時的動作反饋,結合運動生物力學、工程力學、工程學設計、材料力學、結構力學等原理對產品進行設計及研發。
  • 動作捕捉的分類與發展
    簡單來講,動作捕捉就是捕捉演員表演時的動作,然後把這些動作同步到電腦中的虛擬角色上,使虛擬角色的動作和真人毫無差別,以達到逼真、自然的效果。(上海青瞳視覺專注於追蹤定位與動作捕捉系統,諮詢可掃描最下方二維碼)
  • 「動作捕捉&數字人創作套裝」登陸諾亦騰官方商城
    「動作捕捉&數字人創作套裝」由諾亦騰 Perception Neuron™ 系列動作捕捉產品與 iClone 系列快速動畫製作軟體組成。通過二者的無縫銜接,將人體的動作數據與傳統動畫製作工作流完美融合,打造實時驅動的3D製作解決方案,縮短製作時間,讓3D製作效率全面提升。
  • 動作捕捉數據應用到動畫流程詳解
    知乎:王少笛很多讀者對動作捕捉數據如何變成模型動畫有很深的疑惑,今天筆者將給大家分享一下動捕是怎麼應用於動畫製作的工作流
  • 《阿麗塔:戰鬥天使》特效驚人,揭秘動作捕捉技術的新奧秘!
    實際上,阿麗塔完全是通過對演員的動作捕捉後進行CG製作的一名角色,通過對飾演阿麗塔的演員羅莎·薩拉查在片場與所有演員一起進行表演、互動的動作捕捉,盡最大可能將阿麗塔在日常生活中的每一個細微的動作與表情都如實記錄下來。
  • 蘋果眼鏡或將引入類似於Zoom的背景替換技術
    財聯社(上海, 編輯 黃君芝)訊,蘋果一直在研究如何讓類似蘋果眼鏡(Apple Glass)這樣的頭戴式顯示器(頭顯)進行背景實時替換,或者用蘋果AR圖像來替換純色背景。然而,即使這麼做並不是很有效,這種背景替換仍需要大量的數據處理能力。在2020年7月的更新之前,微軟Skype iOS版本甚至不能像Mac或PC版本那樣模糊背景。這種模糊是一個複雜的過程,其中一部分涉及確定一個人的頭部位置和背景開始的位置。色度鍵(Chroma key)讓這一過程變得非常簡單,因為人物被放置在一個單一的純色背景前。這和電影中使用的綠屏或藍屏過程是一樣的。
  • 100多年前,藝術家就開始用「動作捕捉」來搞創作了
    在上世紀早些時候,很多人第一次被動畫人物俘獲的那一刻,是在迪士尼1951年的動畫長片《愛麗絲夢遊仙境》裡。在片中,金髮碧眼的愛麗絲無論一顰一笑,還是舉手投足的細節,都散發著一種生命的活力,似乎與其它動畫片裡或誇張,或寫意的人物形象不盡相同,這是一種真實帶來的力量。而達到這一效果的秘訣,就在於一種百年前誕生的動作捕捉技術——轉描機。
  • 《樂高蝙蝠俠》大電影人物介紹(中)
    有小丑就應該有哈利奎恩,這一次,樂高對哈利奎恩的外形與裝扮做的也是非常到位,多了那份本有的可愛也不丟那酷酷的造型。個人是十分推薦這個人物的。當然,這一次沒有採用玫紅與綠色的分色而採用的紅黑造型也是一個突破。這個人仔的入手難度較低,只要你購買了70906,一對CP就直接擁有了!
  • 動作捕捉的傳奇表演人物安迪·瑟金斯 Andy Serkis
    在「動作捕捉表演演員」之前,安迪·瑟金斯是科班出身的劇場演員。而讓他名揚四海的,則是彼得·傑克遜導演的《指環王》三部曲中的咕嚕姆。在《魔戒》系列中,為怪物角色「咕嚕」進行電腦動作捕捉並配音。而「咕嚕」更是名列《Premiere》雜誌「史上100個最偉大的電影人物」排行榜第10位。在成功地推出了咕嚕姆之後,瑟金斯經常穿著緊身衣和動作捕捉所需的頭部攝影機裝置進行演出,很快他的名字前就有了個定語——世界動作捕捉表演的第一人。《金剛》裡的金剛、《丁丁歷險記》裡的哈達克船長、《猩球崛起》裡的凱撒,背後都是他精湛的表演。
  • IKINEMA LIVEACTION 和虛幻引擎:實時虛擬體驗的強大組合
    藉助 LiveAction 軟體,可以使用動作捕捉攝像頭實時捕捉演員的表演,然後通過 LiveAction 立即將數據傳送到虛幻引擎,使用 ACP 過濾器自動清理數據,然後完美地將數據重新定位到虛擬角色(零延遲)。最終輸出是從演員到角色的連續的、不中斷的自然動作,強大的高效實時流程為動畫團隊節約了不可估量的時間和精力。
  • 實時捕捉漫遊分子片段
    實時捕捉漫遊分子片段 作者:小柯機器人 發布時間:2020/11/29 21:49:52 加拿大國立科學研究院Heide Ibrahim團隊開發了實時捕捉漫遊分子片段的方法。
  • 遊戲的人物動作,是怎麼樣才能比德芙還絲滑的?
    預製動畫在遇到複雜地形的時候經常會出現人物浮空、穿模的問題,因為動畫是固定的,因此人物站立的高度也是固定,遇到了不一樣的地形就會顯得很尷尬。但程序生產的動畫可以通過計算腳與地面的距離、地面的傾角實時調整腳的高度和角度,所以每次都能精確的踩在地面上,不只是在播放動畫,而確實是存在著互動的。