XR電影—虛擬與現實的交互革命者來了

2020-12-21 電科技

說起「特效拍攝」,你腦海中反映的第一個詞會不會是「綠幕」?首先閃現的是不是這樣一幅畫面?

2020年伊始,迪士尼出品的《曼達洛人》中的【Volume】虛擬拍攝創意流程,給全球電影工業帶來了新的認知;這套創意體系在奧斯卡最佳視覺影片《登月第一人》以及 HBO 的重磅作品《西部世界》都有核心的運用,為影片的製作成本,生產效率,以及視覺效果都帶來了革命性的改變;這套體系為電影和劇集的創意及工業流程打通了一條「自由」和「無限想像」的通道。

《曼達洛人》

這條「通道」 將電影工業中的 Production Design 美術,Cinematography 攝影,Performance 表演,Visual Effects 特效,以及影片製作的 Pre-production 前期,Production 中期,Post-production 後期,以一種非線性並且非物理存在的新模式呈現於電影工業流程之中。

《登月第一人》

《西部世界》

如果說, 「表演再也不用靠想像; 美術再也無需一味靠搭建;特效再也無需單純靠綠布」這可能是導演和製片人一直想實現的工作方式,所追求的也正是「電影工業的流程化,模塊化,實時化」。最終達到成本的有效控制化。

而這種實現手段的推進,無疑是一場虛擬與現實的交互革命。而今這場革命,不僅發生在好萊塢,它也真真切切的在中國電影工業中實現了。

乾貨來了【知識點小課堂】

美劇的製作裡所講到的 「Volume」 和 「StageCraft」 如何理解和體會呢?

其創意流程簡答說來就是:

1:場景上,角度轉換自由

2:攝影上,現實與虛擬的自由

3:表演上,體驗與感知的自由

是不是覺得有些空?那麼,結合中國的電影工業現狀,做個簡要說明,乾貨如下:

第一:美術上,場景轉換的自由。

美術的場景,也就是表演的空間。這套體系的核心在於:在有限的攝影棚空間中,敘事空間和表演空間任意轉換,拍攝角度的任意調整。也就是說,導演可以任意選擇正打以及反打, 高低左右,上下前後。改變換景以及換光的效率。

實驗短片《只為夢中與你相遇》中的岸邊的場景轉換

disguise 中的場景轉換

LED中的轉換

實拍中的轉換

第二:攝影上,現實與虛擬的自由

攝影機在現實世界與虛擬環境中的自由遊走。

虛擬引擎可以創造無限的空間和攝影機自由的運動,這套體系可以將物理空間裡的攝影機運動與虛擬引擎的攝影機運動,通過編程控制達到交互和統一控制。

現實世界攝影機運動坐標系與虛擬世界中的攝影機坐標系,原本是兩個完全獨立不相關的主體,彼此之間無法互動,但是我們通過英國 disguise 公司的XR科技 將虛擬引擎所建造的虛擬空間與現實世界攝影機的運動,實現了實時的互動與控制。

追蹤搖臂

機械臂

Mosys 攝像機追蹤

第三,表演上,體驗與感知的自由

虛擬空間對於演員的表演和導演的控制是最大的挑戰。

現場 LED 的仿真影像呈現,將攝影棚中的演員,直接帶入到真實的場景中,沉浸的表演,讓演員有的放矢,相信自己與空間的存在關係。

真實存在的「虛擬世界」讓演員的表演可以建立一種信念,做到「我相信」「我就在」這樣體驗式的表演呈現。

「虛擬與現實」的交互革命,真的來到了你我身邊

電影科技是一門綜合複雜的生產線, 需要主幹技術的研發以及周邊產技術模塊的綁定;北京電影學院副教授李金輝聯手英國 disguise 公司與北京秀加科技(SHOWPLUS)共同研發的【XR-V-Stage】工業級影視劇拍攝創意體系,通過一部完整的實驗短片《只為夢中與你相遇》(簡稱《遇》)進一步驗證了這種創意體系的可實施性。

「只為夢中與你相遇「靈感來自於倉央嘉措的詩句「那一世,轉山轉水轉佛塔,不為修來世,只為途中與你相遇」,這次創作,旨在探究在影片中為真實的角色創造一個奇幻的虛擬世界。「奇幻與虛擬」是一直以來都是電影視覺創作中要面對的最具挑戰的問題。

在《遇》的創作及研發中, XR-V-STAGE 創意系統貫穿了機械臂與攝影機的實時運動,通過實時光學捕捉控制,實現了虛擬環境與物理空間的無縫連結。虛擬引擎對於戲劇環境的營造,讓演員可以在「存在」的環境下,相信自己的表演。

實驗短片《只為夢中與你相遇》分鏡手稿及概念圖例

戲劇燈光用於虛擬拍攝

《曼達洛人》《西部世界》的幕後花絮中,未曾被我們察覺到的,恰恰是被稱為電影視覺創作中靈魂的「燈光」,或許這一點,也恰恰是美國人不願意告訴我們的。

很多人認為,只要有了 LED 屏幕,打光的問題就解決了,這是個錯誤的判斷。現場 LED 的亮度和顯色指數都達不到燈光的標準。LED 屏幕對於人物的最大的影響是「反光補償」,比如反光體,或是畫面的高光部分,例如額頭,發梢,玻璃杯等。在 LED 屏幕環境下可以呈現出真實的色彩和反光狀態。比起綠幕拍攝,這給後期帶來了巨大的便利。

這次試驗中的另外一個突破性的成果是將戲劇燈光用於影視劇的表演塑造。

燈光控臺

現場燈光調試中

在這裡我們不贅述膠片的感光屬性,以及數字攝影機對於感光的具體技術參數。但隨著 LED 燈具的研發以及電影攝影機對於色彩和照度的寬容度增強,戲劇燈光與電影燈光技術的壁壘已經開始逐漸消減。

在 「 XR-V-STAGE」 的創意體系中, 對虛擬空間的燈光設計與物理空間的燈光照明給出了一種解決問題的方案:虛擬引擎中的燈光數據可以通過 Brand MA 燈光控臺,將燈光的色溫,照度,白平衡,等數據數位化虛擬化,呈現在 Virtual Stage(虛擬舞臺) 中。而最為重要的是,虛擬燈光的物理化,可以將演員與場景的變化,做到景與人隨,人隨景至。

實拍時,場景的燈光測試

實驗短片《遇》片中,在水邊望月的一組鏡頭,隨著演員的空間調度,虛擬燈光在 Grand MA 控臺的調試下,完成了與虛擬引擎的氣氛轉化,以及人物面部氛圍的營造。

虛擬世界的空間與現實世界的攝影機運動

虛擬場景中的攝影機運動數據如何與真實物理空間的數據實時交互,是一個不敢企及的問題。

這次將 disguise 的 XR系統與 YASKAWA (安川)機械臂和軌道系統,編寫在一套數據系統裡, 現實世界的攝影機數據可以隨心所欲的驅動虛擬空間裡的奇幻環境。

disguise + 實時渲染引擎

機械臂拍攝

旖旎奇幻環境中的實時轉換:

虛擬引擎為我們帶來的最為便捷的革命,則是「指哪打哪」「瞬間即得」

因為拍攝演員表演的物理攝影機的數據可以驅動虛擬引擎裡的虛擬攝影機,因此,我們可以將演員的表演隨意地帶入任何一個空間。

實驗短片《遇》片中,男女主人公,從橋上到水邊,再到廟堂的屋頂遠眺明月,都是在攝影棚的 V-Stage(虛擬舞臺)中,將場景的大空間布局設置好之後,隨即將演員置入其中,接下來的工作就是演員為導演所呈現的體驗式的沉浸式表演了。那的確是一種相對自由的表演創作。

結語:

XR-V-STAGE(虛擬拓展空間),這種虛擬影像的影視創作流程,為未來影視劇所帶來的核心改觀綜述來談:虛實空間的自由化,攝影運動的可控化,燈光的虛擬交互化,前生產階段的非線性化,視覺特效的現場化和實時化;

當我們站在電影工業發展流程的視角上去審視虛擬空間延展的技術與藝術的互動,沒有理由不相信,XR-V-STAGE 將會非常迅捷的普及到世界電影工業的主流創意體系和生產線中去。

感受到了嗎,這場虛擬與現實的交互革命已經來了,或許它就在你身邊。

電科技專注於TMT領域報導,青雲計劃、百+計劃獲得者。榮獲2013搜狐最佳行業自媒體人稱號、2015中國新媒體創業大賽總決賽季軍、2018百度動態年度實力紅人等諸多大獎。

投稿請登錄:http://www.diankeji.com/member
商務合作請洽:marketing#diankeji.com

聲明:本站原創文章文字版權歸電科技所有,轉載務必註明作者和出處;本站轉載文章僅僅代表原作者觀點,不代表電科技立場,圖文版權歸原作者所有。如有侵權,請聯繫我們刪除。

Tags:

相關焦點

  • STEAMD TECH | 打開混合現實世界,來一次虛擬觸覺交互體驗
    打開FULU和手機藍牙,接通FULU電話當觸覺延伸至虛擬世界,虛擬與現實之間那條明確對立的界線仿佛逐漸溶解,你觸摸虛擬,只是為了更加接近現實。 EPFL人造皮膚與在指甲頂部產生虛擬的觸感不同,瑞士洛桑聯邦理工學院(EPFL)用微小氣囊來提供觸感。
  • VR虛擬實境在遊戲行業的應用優勢
    虛擬實境技術最先在娛樂領域落地,大家最熟悉的3d電影,ar互動遊戲等,近幾年,vr技術在網頁遊戲中的應用也逐漸生成,那麼虛擬實境在遊戲領域的應用優勢有哪些呢虛擬實境技術可以大大增強遊戲的真實感、沉浸感,結合手、眼、耳多感官上刺激人的興奮感。
  • [太毒了]VR的顛覆,虛擬實境性愛產品來了
    這是你戴上虛擬實境眼鏡看到的情景。如果你還沒有女朋友,那麼最接近真實體驗的方法就是買一個虛擬實境頭盔,外加一套交互控制的情趣玩具。早期的VR使用者渴望色情內容,但是涉及到許多複雜的準備工作,各種連接線一大堆,虛擬實境頭盔巨大笨重,謝天謝地,如今,遠程性愛玩具公司Lovense和拍攝實景虛擬實境內容的公司VirtualRealPorn建立了合作夥伴關係。
  • 虛擬實境,讓生活更精彩(開卷知新)
    用戶藉助頭盔顯示器、數據手套、運動捕獲裝置等必要設備,與數位化環境中的對象進行交互,產生親臨環境的感受和體驗。廣義的虛擬實境還包括增強現實、混合現實和增強虛擬。增強現實是將計算機生成的數位化對象疊加在視頻圖像或現實環境之上,向用戶呈現出一種虛實結合的新環境;混合現實和增強現實類似,只是前者中的計算機生成對象與現實環境對象可區分,而後者難以區分。
  • 中國工程院院士趙沁平:虛擬實境 讓生活更精彩
    用戶藉助頭盔顯示器、數據手套、運動捕獲裝置等必要設備,與數位化環境中的對象進行交互,產生親臨環境的感受和體驗。廣義的虛擬實境還包括增強現實、混合現實和增強虛擬。增強現實是將計算機生成的數位化對象疊加在視頻圖像或現實環境之上,向用戶呈現出一種虛實結合的新環境;混合現實和增強現實類似,只是前者中的計算機生成對象與現實環境對象可區分,而後者難以區分。
  • 如何在XR中實現與GUI菜單,鍵盤輸入和指向的基本交互
    來源:映維網 作者 夢秋像我們大多數人一樣,你對人機互動(HMI)的首次接觸可能始於PC的2D圖形用戶界面(GUI)。最近,HMI已經發展到包括行動裝置的控屏傳感器所能實現的動作和手勢。隨著擴展現實(XR)在企業中的普及,HMI正在進入一個全新的時代。
  • XR技術分解——炫酷的XR場景如何實現?
    今年以來,XR技術開始走進大眾視野,越來越多的演唱會、發布會現場、電影拍攝現場以及電視節目等場景,開始運用高科技感以及逼真感的XR技術,開闢拍攝製作又一新玩法。下面且聽小編來分解XR技術。XR場景技術框架包括由LED顯示屏組成的拍攝場地、攝像機、物體位置追蹤與定位技術、實時圖形渲染引擎(AR技術)、高速低延遲的網絡等幾大元素組成,最後將加大元素組合的內容傳輸顯示屏幕前,就成為炫酷的逼真的XR場景。其整體技術框架如下圖所示。
  • 現實中吹口氣就能影響電影畫面?聽專家解析何為「仿生電影」
    虛擬實境技術,目前沒有給電影帶來根本上的革新 從電影誕生時是無聲的影像、黑白的畫面,到後來有聲電影、彩色電影、數字電影,在短短一百多年的時間裡,隨著科技的不斷進步,電影經歷了三次重大技術革命。 第三次工業革命,讓電影呈現更多種樣態。
  • 虛擬實境技術在教學實驗應用有哪些具體案例?
    虛擬實境技術在物理、化工實驗上成為後起之秀,充分補充了傳統實驗教學帶來的危險性和局限性,為遠程教育豐富了教學形式,保障教學效果。虛擬實境技術集合3d技術、多傳感交互技術以及虛擬實境製作平臺構建三維可視化的虛擬場景。
  • 虛擬實境的未來發展趨勢及應用
    我們是國家重點實驗室,也是國家工程實驗室,也就是說虛擬實境這個領域「國字號」的兩個單位都是我們這邊,負責人是趙院士。今天,我首先講講虛擬實境技術現狀與趨勢。可以說VR技術有利於推動信息物理社會空間的不斷融合,比如我們生存的物理世界,會有社會、貨品、商品,構建了這樣一個虛擬世界,這個信息化模型可以找到映射。
  • VIRGLASS虛擬實境頭盔評測 在VR裡看電影
    筆者作為一名測評師,體驗各種新奇酷產品一直是最大的樂趣,在拿到這款VIRGLASS虛擬實境頭盔之前,我就先了解了一下相關的知識。想必大家聽到這些名詞也是一頭霧水,筆者就將自己學到的知識簡要科普一下。VR(Virtual Reality,即虛擬實境,簡稱VR),是由美國VPL公司創建人拉尼爾(Jaron Lanier)在20世紀80年代初提出的。
  • 藝術家們是如何看待虛擬實境這一未來大勢的?
    她的作品多通過「挪用」的方式來探索暴力和反抗,作為千禧一代的藝術家,她常用的標誌和符號來自於青少年時期影響其世界觀的一切,通過巧妙地使用符號和儀式,來將她對現實與過去的認知形成鮮明對比,她的作品使用各種各樣的媒介,旨在武裝、保護處於暴力控制之下的身體。同時受到虛擬實境的啟發,她略帶諷刺地,試圖通過這些物體和材料在極端情況下所產生的力量來揭示人的複雜性。
  • 用於虛擬實境和增強現實應用的紡織電子產品
    交互式紡織電子設備可能會為虛擬實境(VR)/增強現實(AR)應用程式提供合適的平臺,這是因為它們的出色性能以及獨特的沉浸式功能(例如,即使在高變形下也具有輕巧,方便,靈活,舒適和低應變的特性)。本文對交互式設備,製造技術,系統集成,有前途的應用以及基於紡織品的VR / AR系統所涉及的挑戰的最新技術文獻進行了系統的回顧。
  • 益弘金融商學院排名:虛擬實境的未來發展
    我們是國家重點實驗室,也是國家工程實驗室,也就是說虛擬實境這個領域「國字號」的兩個單位都是我們這邊,負責人是趙院士。  今天,我首先講講虛擬實境技術現狀與趨勢。  可以說VR技術有利於推動信息物理社會空間的不斷融合,比如我們生存的物理世界,會有社會、貨品、商品,構建了這樣一個虛擬世界,這個信息化模型可以找到映射。
  • VR全景技術:打造虛擬實境智慧城市
    商迪3D運用三維全景虛擬實境技術,通過計算機技術展現全方面互動性、真實性、虛擬實景、交互式720°全景觀看等功能實現智慧城市可持續發展的重要手段。VR全景智慧城市的運用VR全景智慧城市運用一種虛擬實境技術,深入研究虛擬實境技術的應用。給人帶來一種全方面的展現現場真實場景,更加真實體驗感受。
  • 專題|夜深人靜,你可以來一場虛擬性愛了
    隨著Oculus、Hololens、Magic Leap等新一代的VR/AR技術的出現,我們對於幻境的反應不再是難以置信,而是必須不斷提醒自己,這只是幻境,而非現實。虛擬實境也許是一種終極媒介,它消滅了時間與空間,使人得以自由往來。
  • 鑽進「人體內臟」 感知器官構造 西北首臺虛擬實境仿真(VR)系統...
    在虛擬實境環境中,想了解人體的任何一處組織、神經、淋巴、血管,點擊都可一覽無餘。體驗者從視覺、聽覺、觸覺等感官的模擬,就像置身其中一樣,這是虛擬實境仿真(VR)系統帶給體驗者的真實感受。近日,蘭大二院引進西北首臺虛擬實境仿真系統,並應用於臨床醫學教育,學生可在虛擬實驗室中進行「人體」解剖和各種手術練習。
  • 前方到站,虛擬實境
    作者丨陸離監製丨闌夕在被稱為是一封寫給全世界電子遊戲愛好者的「情書」——2018年上映的科幻電影《頭號玩家》中,史匹柏所營造的VR遊戲世界「綠洲」,讓人們真切的感受到了什麼叫「這個世界是只為圍繞我們自己轉動」。
  • 影訊|開心麻花《超能一家人》立項 管虎監製電影《革命者》立項
    管虎監製電影《革命者》立項,定檔2021年7月1日 《革命者》海報 根據國家電影局最新備案公示,電影《革命者》已獲準拍攝,編劇為張子五。
  • XR興起,LED顯示屏取代傳統綠幕成為拍攝背景
    XR技術興起,LED顯示屏拍攝背景應用案例頻出XR名為「擴展現實」,是指聚合虛擬實境(VR)、增強現實(AR)和混合現實(MR)等技術的3D視覺交互系統,沉浸式體驗改變著人們獲取信息、體驗、以及彼此聯繫的方式,融合了虛擬和增強現實等技術的擴展現實(XR)技術就能做到消滅現實距離,「重置」人們在時空中的關係