虛擬實境|混合現實|超維沉浸|交互體驗|未來的影院是這樣的…

2021-02-18 工業網際網路洞察

編者薦語:

影院是一個特別的「引力場」,它從存在之初就是虛擬世界和現實世界的交界口。影院從存在之初就是科幻,走在了現實之前,影院的未來可能也隱喻著這個世界的未來,隱喻著人與人、人與物連接交互的變化。8個未來影院案例提前感受下吧。(引力場實驗室 評)

來源:引力場實驗室 Magnet Lab

文章來源於新媒體藝術站 

周末愉快!

沉浸式影院、全景影院、交互式影院

VR/AR影院、自導式影院、樂高影院

表演性影院、可自生影院、延展影院

……
關於未來影院,你有什麼樣的想像?

無論是立體聲、寬銀幕、3D電影還是球幕、全感影院……影院一直都在追求從熒幕體驗上讓觀眾有身臨其境的真實感,由此帶來更豐富的感官體驗和更多元的影音享受


去年,由法國著名設計師皮埃爾·奇坎(Pierre Chican)設計的一座充滿科幻感的沉浸式電影院,宛如一個個飛碟式的包廂,就像電影《星球大戰》銀河議會的現實再現,引發了人們對於未來觀影方式的暢想。

沉浸式影院Ōma Cinema 概念設計 by Pierre Chican

在2020第二屆國際數字媒體藝術與科技大會上,前香港城市大學創意媒體學院院長、德國藝術與媒體中心視覺媒體學院的創始人之一:Jeffrey Shaw(邵志飛),做了一場關於「未來影院」主題分享,以他所研究的未來數位化藝術作品和技術創新為例,與大家分享了延展影院、沉浸式影院、全景影院、自導式影院、樂高影院、VR/AR影院、表演性影院、交互式影院、可自生影院的特徵,討論新技術在電影創作和表達上的融合多重性,以自己的藝術作品為例,試圖描述未來影院的更多可能。

下面跟隨藝術家Jeffrey Shaw

開啟未來影院的9種暢想吧

從電影的早期開始

沉浸式影院的想法一直是一種未來的願景

今天,我們可以在觀眾周圍以及腳下進行投影

從而創造出完全的沉浸式3D體驗

木偶處於虛擬世界的中心

其所有關節處都裝有傳感器

觀眾可以通過操控木偶身體

以調節所看到和聽到的事物

完整的圓頂投影也是一種奇妙的沉浸式體驗
尤其是當觀眾躺下來向上仰望的時候

在世界經濟論壇上

這種完整的圓頂中展示了敦煌的洞穴

藉助於敦煌研究院提供的照片和雷射掃描文件

將這些數據組合成一個三維模型

然後創建了一個敦煌的應用程式

用於交互式360度立體投影系統

他們首先模擬了現實世界中的手電筒

然後對其進行充分照明

虛擬放大鏡這種工具能讓觀眾仔細觀察畫作的細節

人們還可以查看已修復了原始色彩的繪畫部分

繪畫中的對象作為動畫3D模型從繪畫中浮現出來

畫中的舞者也變得栩栩如生

延展影院的概念開始於60年代

那時,並沒有像在電影院中那樣投影到平面屏幕上

而是投影到了可充氣的圓頂上

圓頂內發生了各種各樣的實時活動

包括現場表演

另一個例子則是在比利時克諾克實驗電影節上的經歷

同樣,屏幕不是被平坦地固定在牆上

而是固定在了地板上的大型充氣物上

觀眾可以跳進去,親自參與到電影當中

現實世界就在我們身邊

因此全景電影再現了更加真實的體驗

在70年代

Jeffrey Shaw團隊為流行樂團「創世紀」(Genesis)

提供了多屏投影來對圖像進行擴展

在90年代建立的這種旋轉平臺

讓觀眾可以用360度及3D方式探索印度的一處遺址

上圖是用於捕捉3D全景圖的特殊旋轉雙頭攝像頭系統

這是左眼和右眼拍攝到的照片

這些全景圖片隨後被用於構建印度城市

亨比的虛擬景觀

在眾多的全景場景中

合成了印度教眾神的3D動畫

在亨比的虛擬景觀中

觀眾可以選擇進入任意一個圓柱體

然後在1:1比例的環境中以3D的方式瀏覽眾多寺廟

進入這個特殊的圓柱體後

可以看到溼婆在廟頂起舞

當我們去看電影時,導演和攝影師都是別人

在未來的電影中,可能就是你自己

上圖是90年代早期的一個例子
這是一個圓頂,裡面的機器人裝有投影儀

無論看向什麼地方

投影儀都會跟蹤頭部的運動

整個圓頂布滿了4k魚眼電影

環顧四周時還控制著一個虛擬攝像頭的窗口

Jeffrey Shaw和伍斯特集團

在紐約拍攝的這個全景電影中

也使用了類似的方法

全景攝像機360度記錄了同時進行的許多不同場景

其界面是一把椅子
可以讓坐在上面的觀眾環顧四周

觀眾看到的地方是聚焦(清晰)的

除此之外的一切都是失真不清的

觀眾不僅選擇了自己的聚焦視角

音軌也被調控到正在看向的地方

所以坐在椅子上的人實際上是在為其他觀眾創造電影

其每一次表演當然也都是不同的

這是一個包含3萬段視頻片段的資料庫

支持360度的全方位瀏覽

這是一個真正的、完全將人包圍的三維圖像空間

在這裡觀眾可以選擇任何視頻

系統會自動搜索並排列

與觀眾選擇的視頻相關的其他視頻

通過拖拽這些視頻可以組合自己的電影

這就像是一種敘事電影的樂高工具包

虛擬實境(VR)和增強現實(AR)

也是未來電影的重要特徵

這是Jeffrey Shaw的AR作品之一

CRT顯示器和透視鏡可以旋轉和傾斜

用以顯示浮動在房間不同位置的虛擬物體

其中一個物體是帶問號的「FUTURE」

最近,在對這個作品進行重新製作的過程中

解決這個「FUTURE」問題變得更加迫切

早期Apple 2相對有限的實時圖像水平

決定了AR物體結構的簡單性

在巴黎拉維勒特的AR裝置

採用了一種類似於旋轉式潛望鏡的裝置

這個作品基於互動視頻光碟

讓觀眾能夠選擇並看到浮動在博物館

不同區域的各種視頻圖像

Jeffrey Shaw創建了這個具有開創性的增強現實裝置

觀眾可以從任何角度觀看這個基座上的金牛

在最近這幅作品的升級版本中

使用了iPad Pro和光學跟蹤設備

並在基座上嵌入了四個攝像頭

觀眾現在可以在金牛的皮膚上看到自己的實時映像

在敦煌項目的後續工作中

使用了AR技術來對其中一個洞穴實現1:1比例的探索

跟蹤系統可以識別平板電腦的位置和方向

利用增強現實技術

觀眾進入並探索達文西的這幅名畫《巖間聖母》

觀眾可以走到前景人物的後面

進入達文西描畫的神奇洞穴

裡面包含所有的地質構造和植物等

在新冠期間

他創作了這個叫《安全屋》的作品

這次還是通過使用平板電腦

觀眾可以打開儲物櫃的門並對其進行逐一查看

在這裡他們發現了各種各樣的人

他們過著與世隔絕的社會生活

練習著他們從視頻遊戲中學到的動作

從六種不同的角度以3D方式

錄製著名的日本舞蹈家敕使川原三郎的舞蹈

它是在大型六邊形外殼上進行背投的

觀眾可以圍繞著六邊形行走

並從六個角度觀看3D效果的表演

因而實際上

他們創建的是1:1比例的全息效果圖

在這幅作品中

記錄了新加坡著名詩人Edwin Thumb

朗誦的28首不同的詩歌

然後將這些影像放置於360度的3D投影環境中

通過使用麥克風來控制虛擬麥克風

觀眾可以選擇聽哪首詩

兩者之間創造出了一種新穎、獨特的詩歌組合

在過去的幾年中

他們開展的一項主要項目是

對香港功夫大師的動作進行數字捕捉

以創建一個前所未有的非物質文化遺產圖書館

武術動作的捕捉還促使我們探索對視覺分析的使用

例如在時間和空間中追蹤動作

在展覽中,他們創建了一個六面的3D可視化系統

來向公眾展示動作捕捉數據

觀眾可以在這裡與檔案資料庫的內容進行互動

對功夫的這種數字可視化

不僅讓人們獲得美學上的滿足

而且也是非常有用的解析工具

林世榮大師是20世紀初期香港偉大的武術家

他留下了許多自己的照片

利用這些照片可以建立他的3D模型

在CityU中

他的曾侄子Oscar Lam表演了他的一段功夫套路

對其進行動作捕捉並將數據應用於虛擬建模

結果就是已逝功夫大師的樣貌通過電腦得以重建

並通過對其家族後代的表演進行數位化

讓其重新恢復了生命

在1989年創建的LEGIBLE CITY中

觀眾騎著自行車穿過城市中的景觀

景觀中的建築都是由文字組成的

在他們的功夫項目中

也在探索讓大眾成為功夫大師的方法

例如這個姿勢匹配裝置

即將在大館舉行的一場展覽中呈現

經過訓練,觀眾也可以成為一名劍術大師

通過自己的劍跟隨大師的劍舞動所產生的軌跡

或許未來影院最令人興奮的可能性之一

就是使用人工智慧和機器學習來創建自動影片

這個裝置是基於Samual Becket的測試
把一個虛擬人類社區

放在一個3D背向投影的六邊形外殼裡

觀眾可以通過放置在六個屏幕周圍的手電筒

來觀看這個虛擬的人類社區

這些虛擬人類是通過計算得以動畫化的
他們是一個人工生命的社區

不斷調整著自己的實時行為

圖示為正在實時調整其行為的AI軟體

最後一件人工智慧作品《FALL AGAIN FALL BETTER》

一群虛擬人類位於廢墟之上

當一位訪客站在他們面前的墊子上時

他們就會摔倒

當訪客離開時,他們就站起來了

當訪客再次踩到墊子上,他們又跌倒了

然而,他們每次跌倒都是獨一無二的事件

他們從來不會以同樣的方式跌倒兩次

這件作品目前正在德國展出

它投射在一堵長250米、高10米的牆上

將我們帶入未來影院的另一面

它可以存在於電影之外

以任一規模嵌入到城市環境中去

德國藝術與媒體中心(ZKM)視覺媒體學院創始人之一;時任UNSW(新南威爾斯大學)iCinema中心主任;前香港城市大學創意媒體學院院長。六十年代以來新媒體藝術的先導者;在虛擬實境、混合現實以及沉浸式視覺體驗、文化遺產數以及互動敘事各範疇均樹立鮮明典範。策劃多項知名國際展覽,如「未來影院」(Future Cinema,2000年)、「動感功夫」(Kung Fu Motion,2018年)等。近年獲得多項獎項和殊榮,如日本岐阜織部賞、加拿大滿地可藝術科技中心終身成就獎、奧地利連茨Ars Electronica電子藝術節媒體藝術先鋒金獎等。

掃碼關注Jeffrey Shaw

更多作品案例

Jeffrey Shaw2020第二屆國際數字媒體藝術與科技大會

演講「未來影院」

Alan Jackson TED演講「電影院的未來」

掃碼關注我們

工業網際網路洞察

微信號:IIInsight

相關焦點

  • XR電影—虛擬與現實的交互革命者來了
    首先閃現的是不是這樣一幅畫面? 虛擬引擎可以創造無限的空間和攝影機自由的運動,這套體系可以將物理空間裡的攝影機運動與虛擬引擎的攝影機運動,通過編程控制達到交互和統一控制。 現實世界攝影機運動坐標系與虛擬世界中的攝影機坐標系,原本是兩個完全獨立不相關的主體,彼此之間無法互動,但是我們通過英國 disguise 公司的XR科技 將虛擬引擎所建造的虛擬空間與現實世界攝影機的運動,實現了實時的互動與控制。
  • xR電影—虛擬與現實的交互革命者來了
    首先閃現的是不是這樣一幅畫面?虛擬引擎可以創造無限的空間和攝影機自由的運動,這套體系可以將物理空間裡的攝影機運動與虛擬引擎的攝影機運動,通過編程控制達到交互和統一控制。現實世界攝影機運動坐標系與虛擬世界中的攝影機坐標系,原本是兩個完全獨立不相關的主體,彼此之間無法互動,但是我們通過英國 disguise 公司的 xR 科技 將虛擬引擎所建造的虛擬空間與現實世界攝影機的運動,實現了實時的互動與控制。
  • 虛擬實境,讓生活更精彩(開卷知新)
    用戶藉助頭盔顯示器、數據手套、運動捕獲裝置等必要設備,與數位化環境中的對象進行交互,產生親臨環境的感受和體驗。廣義的虛擬實境還包括增強現實、混合現實和增強虛擬。增強現實是將計算機生成的數位化對象疊加在視頻圖像或現實環境之上,向用戶呈現出一種虛實結合的新環境;混合現實和增強現實類似,只是前者中的計算機生成對象與現實環境對象可區分,而後者難以區分。
  • 通過空間定位點技術增強人機互動,微軟混合現實又向前邁進一步
    混合現實(mixed reality,MR,融合增強現實和增強虛擬)指的是合併現實和虛擬世界而產生的新的可視化環境。在新的可視化環境裡物理和數字對象共存,並實時互動。更學術一些的說法是,混合現實(mixed reality, MR)是一種使真實世界和虛擬物體在同一視覺空間中顯示和交互的計算機虛擬實境技術。
  • 不戴VR頭盔的虛擬實境體驗 720穿越飛船的一次破局
    VR虛擬實境為人們帶來了前所未有的新鮮體驗,使用戶可以親身暢遊於遊戲或電影場景裡,真實的感官體驗讓不少用戶沉迷其中,但是,由於長時間佩戴VR頭盔,給人們的視覺系統帶來了不小壓力。根據這一現象,首望體驗科技文化有限公司推出「無需佩戴VR頭盔即可體驗虛擬實境場景」的理念掀起了波瀾。
  • 電影中的虛擬實境,就是最火的《頭號玩家》一樣
    虛擬實境技術(vr)是一種可以創建和體驗虛擬世界的計算機仿真系統,這些世界是「混合現實」(mixedreality)的子集。虛擬實境技術是通過交互式多感官體驗來創建和體驗虛擬世界的計算機仿真系統。其中包括的vr生成、渲染技術也包括了創建立體的三維效果以及來自真實世界的動態影像。
  • 虛擬與現實場景碰撞,MR技術未來可期
    在這樣的大環境下,MR混合現實技術應運而生。混合現實技術不只是一個單一的技術,而是一套技術組合。混合現實技術簡單來說就是VR技術與AR技術的完美融合以及升華,讓虛擬和現實互動,不再局限於現實,從而獲得前所未有的體驗。它將數字世界與物理世界相混合,然後展現大家所需要的場景。
  • 漫談混合現實(MR)技術之一 ——什麼是混合現實(MR)技術
    而電影中的虛擬世界「綠洲」儼然已成為與現實世界平起平坐的另一個世界,在給觀眾視覺震撼的同時,也為觀眾們帶來了一次混合現實(MR)技術的科普和未來的遐想。一、什麼是混合現實(MR)MR,是英文Mixed Reality兩個單詞的縮寫,中文翻譯為混合現實。
  • 虛擬創造現實:駛向VR的美麗新世界
    2014年3月,Facebook以 20億美元收購沉浸式虛擬實境技術公司Oculus VR。馬克·扎克伯格堅信,虛擬實境將成為移動領域之後,計算平臺的又一大事和下一個能帶來更有趣用戶體驗的平臺。虛擬實境開始在公眾視野裡快速生長。
  • 虛擬實境的未來發展趨勢及應用
    FBEC2020 |北京航空航天大學國家重點實驗室副教授潘俊君:虛擬實境的未來發展趨勢及應用12月11日,2020未來商業生態連結大會暨第五屆金陀螺獎頒獎典禮(簡稱「FBEC2020」)在深圳大中華喜來登酒店6樓宴會廳開幕。
  • 段慧琳|虛擬實境的「仿真」、「內爆」與「超真實」
    另外,本文也對虛擬實境的現狀與未來發展作了初步梳理和探究,隨著其他虛擬實境類型的出現,如增強現實(AR)和混合現實(MR),翟振明教授提出的擴展現實(ER)很可能就是虛擬實境的未來。從技術層面上講,虛擬實境是一種「基於可計算信息的沉浸式交互環境,具體地說,就是採用以計算機技術為核心的現代高科技生成逼真的視、聽、觸覺一體化的特定範圍的虛擬環境,用戶藉助必要的設備以自然的方式與虛擬環境中的對象進行交互作用,相互影響,從而產生親臨等同真實環境的感受和體驗」。
  • 虛擬實境技術,可以「以假亂真」的技術
    今天,我聽到了這樣的事情,那就是虛擬實境技術。顧名思義,所謂的虛擬實境技術是虛擬與現實的結合。從理論上講,虛擬實境技術(VR)是可以創建和體驗虛擬世界的計算機仿真系統。它使用計算機生成模擬環境並使用戶沉浸在該環境中。
  • VX Entertainment打造體感交互結合沉浸打造完美體驗
    在人們交流不暢、語言不通時,肢體與手勢的輔助溝通就成了人的本能,體感交互技術作為前沿科技,由於互動效果驅動性強,在許多沉浸式體驗環境裡為用戶提供極具沉浸感的交互環境,自然的體感交互削弱了人們對滑鼠和鍵盤的依賴,降低了操控的複雜程度,使用戶更專注於動作所表達的語義及交互的內容。
  • 【專訪】Fraunhofer沉浸式3D音效打造完美虛擬實境
    聽覺可以引導視覺,試想如果我們在欣賞原始森林的VR美景,耳邊卻是嘈雜的人聲,又或者由於背對而錯失導演精心準備的VR畫面,音畫脫節,我們又如何能夠沉浸其中?怎樣才能使得「虛擬實境」變成「真的現實」,Fraunhofer為我們做出了完美解答。
  • 虛擬實境遊戲技術的優勢及實踐
    虛擬實境遊戲技術的優勢及實踐 虛擬實境產品超市 發表於 2020-11-18 11:48:50   隨著網際網路技術和數位化技術的快速發展,人們對於遊戲的服務體驗度也有了更高的要求
  • 未來影院這樣玩,第一個就被吸引了!
    ……影院一直都在追求從熒幕體驗上讓觀眾有身臨其境的真實感,由此帶來更豐富的感官體驗和更多元的影音享受。去年,由法國著名設計師皮埃爾·奇坎(Pierre Chican)設計的一座充滿科幻感的沉浸式電影院,宛如一個個飛碟式的包廂,就像電影《星球大戰》銀河議會的現實再現,引發了人們對於未來觀影方式的暢想。
  • 虛擬實境遊戲技術的優勢及應用實踐
    該技術最大的特點是通過模仿使用者嗅覺、聽覺、視覺和觸覺,創造出一個虛擬的環境,並讓使用者在這個環境中接受到真實環境的感覺,並且能夠與該環境中的事物進行交互,最終給予讓使用者認為環境中的一切都是真實的。   VR虛擬實境技術的發展分為四個階段:   第一階段:1960年以前蘊育虛擬實境思想階段。
  • 索斯派克與清華大學研究混合現實與仿真平臺
    「創客」一詞指出於興趣愛好,努力把創意轉變為現實的人。隨著創客運動的發展,人們越來越認識到創新、創造對行業發展和改革實踐帶來的深遠影響。為鼓勵創客創新創業,清華大學為該校師生和青年創業聯盟提供了16500平米的創客空間「i center」。並與專業虛擬解決方案服務商——索斯派克聯手打造iCenter混合現實與仿真研究開發平臺。雙方將進一步推動虛擬科技發展。
  • 虛擬實境混合MR視頻製作指南
    什麼是MR(Mixed Reality)虛擬實境混合視頻?Mixed Reality視頻就是VR影像+人的影像合成的視頻。而在此之前,我們看到的大多數的虛擬實境演示大多數都是下面這樣,對於很多從來沒有體驗過虛擬實境的人來說看起來確實有點不知所云,雖然玩耍的人確實因為身臨其境感覺很爽。綜藝節目中日本女優體驗VR時被嚇傻。
  • Rokid發布全新一代MR眼鏡 首次闡釋「未來交互」理念
    基於對交互的全面思考,祝銘明指出,未來交互平臺應具備四大能力:一是感知能力,即未來的輸入能力,從過去冰冷的電腦指令變成人與傳感器、人與環境的交互;二是理解能力,在感知的同時,讓產品更好地理解用戶的意圖,比如 MR眼鏡的識別功能;三是通信能力,緊跟 5G、6G 等技術發展的腳步,提供更快更無感的信息傳輸能力。