可嵌入手機!三星出品首個超薄交互全息顯示屏,4K 視頻實時生成

2020-12-21 雷鋒網

今年 7 月 9 日舉行的 2020 世界人工智慧大會上,馬雲、馬斯克再度「同臺」。

當天受疫情影響,WAIC 有史以來第一次採用了雲端形式,作為大會開幕式壓軸演講嘉賓的馬雲身在雲南,一項技術使得他與我們連接了起來——全息投影。

其實,這項技術迄今已有 70 餘年的歷史。

早在 1947 年,英國匈牙利裔物理學家 Gábor Dénes 發明了全息投影術。基於這項成就,他獲得了 1967 年的英國物理學會楊氏獎和 1971 年諾貝爾物理學獎。

而最近,被稱為是「顯示屏霸主」的三星在這一領域又有了新突破——提出了一款超薄交互式全息顯示屏,可以從多個角度提供高解析度的、真實度極高的 3D 視頻,未來可以集成到行動裝置中,支持辦公或家用。

何為全息?

實現這一突破的科研團隊來自於三星先進技術研究所(SAIT)、三星先進技術研究所俄羅斯(SAIT-Russia)光學研究小組和首爾大學。

2020 年 11 月 10 日,其論文發表於《自然》子刊《自然通訊》,題為 Slim-panel holographic video display(超薄全息視頻顯示面板)。

在了解這篇論文之前,何為全息是首先要了解的一個問題。

全息投影本質上是一種 3D 技術,其英文名稱是 Holographic Projection,其中 holo 來自於希臘語,意為「完全的信息」。

要傳遞「完全的信息」,需要兩步:

拍攝:利用幹涉原理(即:兩列或以上的波在空間中重疊時發生疊加,形成新的波形),將被攝物體在雷射輻照下形成的物光束和射到全息底片上的雷射參考光束進行疊加,產生幹涉並記錄下來。經過一定處理後得到全息照片。成像:利用衍射原理(即:波遇到障礙物時會偏離原來的直線傳播),利用相干雷射照射全息圖,一張線性記錄的正弦型全息圖的衍射光波可給出兩個象,圖像的立體感增強,也有了真實的視覺效果。簡而言之,全息投影技術的原理可以理解為:利用 2 個物理現象,巧妙地將一個物體拍攝成了一張照片,再把這張照片打造出立體感。

正因如此,全息投影又被稱為虛擬成像。

值得一提的是,當真實物體與全息圖像處於同一空間時,它們都可被感知,而且並無不同。

比如在下面這張照片中,一隻真實的人手拿著全息顯示屏,顯示屏上是一個精靈的形象。全息圖像和人手離拍下這張照片的相機的距離都是 0.3 米。

全息顯示器提供了自然的深度感知,觀眾更為關注的是精靈本身,而不是屏幕。

相比之下,如果是利用雙目視差和輻輳(即:注視近物時雙眼匯聚)的傳統立體 3D 圖像,觀眾可能無法同時清楚地看到精靈形象和人手,並且還會出現由調和-收斂衝突引起的視覺疲勞。

因此,全息顯示可以說是未來視頻系統的重要組成部分。

其實,自 1947 年被發現以來,全息技術已然成為科幻片中的經典元素,人們對它的認知也一直是:可以再現最真實的 3D 圖像,且無視覺上的不適。

視角擴大 30 倍,4K 高解析度全息圖實時生成

1990 年,麻省理工學院媒體實驗室(MIT Media Lab)開發出了第一套全息視頻系統。自此,將全息視頻推向商業化,成為該領域的一大主要研究方向。

2018 年 5 月,美國相機巨頭公司 RED 推出了世界上第一款商用全息投影智慧型手機 Hydrogen One。

當時,雖然這款手機引起了外界很大的關注,但當產品推出時,業界人士和媒體都表示,這款手機在全息投影上都沒能給出一個令人滿意的用戶體驗。實際上直至今天,要實現「商業全息視頻顯示器」依然存在瓶頸。

三星 & 首爾大學團隊在論文中表示:

商業全息視頻顯示器還未被批量引入,原因主要在於觀看角度較為狹窄、光學設備較為笨重、計算能力要求較高。

具體來講,要想打造一款適合商業化的移動全息視頻顯示器,需要克服三個障礙:

空間帶寬乘積(space-bandwidth product,SBP)的限制,這決定了全息圖像的大小和觀看角度。為產生大的相干背景光,需要複雜的光學元件和相當大的空間來處理光。所以,要實現平板電腦一樣輕薄的全息視頻顯示屏,並非易事。實時全息圖通常需要大量計算,且計算量會隨著空間帶寬乘積的增大而增大。基於上述問題,三星 & 首爾大學團隊提出的超薄交互式全息顯示屏有 2 處特別設計:

一是由相干 BLU(C-BLU)和光束偏轉器(BD)組成的背景光轉向單元(steering-backlight unit),它一方面使得有效空間帶寬乘積(即視角)擴大了 30 倍,由此實現了有史以來最大視角的動態全息圖;另一方面,其繞射波導結構(diffractive waveguide architecture)保證了顯示屏最終的超薄設計,總厚度不超過 10 釐米。

下圖中 2 個藍色箭頭為擴大的可視範圍。

二是包含數據傳播單元(DPU)、濾波器和縮放單元(FSU)以及 32 個快速反傅立葉變換處理器的全息視頻處理器(holographic video processor),單片可實時計算生成 4K 高解析度全息圖。

最終,全息視頻顯示屏的原型如下圖所示,下圖中的標識從上至下依次是:空間光調製器、幾何相位鏡頭、連貫的背光單元、光束偏轉器、全息視頻處理器。

不僅如此,三星 & 首爾大學團隊用到的系統總線(System Bus)是被廣泛用於智慧型手機應用處理器中的 AMBA AXI4,因此將全息視頻處理器嵌入智慧型手機應用程式處理器,在未來也能實現了。

最後,讓我們一起感受一下這塊全息顯示屏投射的一個支持多角度觀看的 4K 海龜遊泳動圖,海龜往哪個方向遊,觀眾直接按鍵即可控制。

看上去似乎平平無奇,但實際上由於畫面中所有物體的深度不同,全息物體的清晰度會隨相機焦點的變化而變化。

下圖為視頻截圖,圖 a 的右上角插圖中,珊瑚比烏龜更清晰;而圖 b 的插圖中,烏龜比珊瑚更清晰。

這和平時我們的相機是否對焦是同樣的道理,自然這也反映出了全息圖的獨特之處——可提供調試,最終圖像與真實物體並無差別。

至此,全息投影這一有著 70 餘年歷史的神奇技術有了重要突破,我們離手機上的全息投影不遠了。

相關焦點

  • 全息視頻又往前進了一小步
    近日,發表在《自然-通訊》(Nature Communications)雜誌上的一項研究提出了一款超薄交互式全息顯示屏,可以實現讓觀眾從多個角度觀看高解析度的 3D 視頻,該技術有望讓全息視頻顯示屏更好地集成到行動裝置中。
  • 「任意門」來了:全息投影瞬間轉移身體,實時交互,還能「召回」去世...
    不過這可不是真的讓你整個人瞬間轉移,而是把你用全息圖的形式發射到另一個地方。還是沒懂?不僅如此,這個機器還能與記錄下來的人物進行全息圖形式的交互,比如,你可能從來見過這樣亦真亦假的小丑吧:甚至,用這種方式,你還可以和自己身邊已經去世的親人重新建立聯繫,用全息投影的方式讓他們 " 重回 " 這個世界。
  • 三星的「粉餅盒」:可摺疊手機Galaxy Z Flip高清渲染視頻曝光
    IT之家1月14日消息 三星官宣將於2月11日推出一款類似於Razr的摺疊式手機Galaxy Z Flip。不過目前有關這款可摺疊手機的圖片也已經被洩漏,今日荷蘭科技媒體LetsGoDigital已基於這些圖片發布了該設備的全新渲染視頻,一起來看一下。
  • 小辣椒手機創始人王曉雁加入小米;手機 QQ 可顯示對方實時電量;Git...
    統一作業系統 UOS 與銳捷桌面整機完成適配騰訊車聯推出挪車碼抖音被曝秘密開發換臉功能,視頻加水印防作偽"沒電下回聊"成為過去式,手機QQ可顯示對方實時電量小辣椒手機創始人王曉雁加入小米美國限制 AI 軟體出口三星將展示「虛擬人」項目成果,能自主生成表情動作iPhone
  • 《精靈寶可夢GO》和微美全息AR成為5G時代典型應用場景
    全息AR廣告軟體使用戶能夠在視頻片段中插入真實或動畫的三維(「3D」)對象,和場景片段無縫集成,主要用於將全息AR廣告嵌入由中國領先的在線流媒體平臺託管的電影和節目中。2019Q1,使用微美軟體製作的全息增強版廣告共產生約23億次觀看,2018Q1觀看次數約為12億次,同比增長91.7%。
  • 全新摺疊設計+雙屏交互,19999元的三星W21 5G評測
    ■由外到內的工藝創新市面上難得少見的完全體摺疊屏差異化的外觀只是吸引人眼球的第一步,三星W21 5G採用的創新工藝技術,才是它彰顯功底的關鍵部分。從屏幕材質看,新機內屏採用三星超薄柔性玻璃(UTG),相比市面上其他採用CPI薄膜的摺疊屏手機,這種新材質有著更高的透光率,屏幕觀感更佳。
  • 評測Gear 360:這款大眼萌全景攝相機讓(偽)索粉有了買三星手機的衝動
    Gear 360設置了三個按鍵和一個小的顯示屏,按鍵邏輯和GoPro基本類似,基本上上手就會,毫無難度,最基礎的操作和設定也可以通過小屏幕完成,在戶外活動時降低了操作難度。Gear 360的圖像處理器採取的是三星最新的晶片,與去年三星出的的微單NX500採用的是同一款晶片,即DRiMe5S(三星旗艦單反NX1採用的是DRIme5,5s是其升級版),這款晶片支持儲存H.265編碼的4k視頻(最高可支持8K,不過Gear 360最高不到4K),速度更快,色彩還原度更高,降噪性能也更強,與其他全景相機相比,Gear 360在色彩表現力上確實更加優越
  • 三星Galaxy Watch3 評測:出色的交互體驗,實用的健康功能
    △ 三星 Galaxy Watch3 規格我們開箱的這一款是 45mm 曜巖黑藍牙版的 Galaxy Watch3,我們將從設計、交互、智能、運動、健康幾個方面,對這款產品做一個綜合評測。交互和智慧型手機端下載「Galaxy Wearable」應用——三星手機是標準配置,即可完成手機與手錶的連接,並幫助手錶完成固件升級。
  • 電視機品牌哪家好之三星55英寸4K智能曲面電視試用測評
    三星電視機可以說是我用過的電視機中表現最優秀的液晶電視,無論是畫質還是音效都非常好,液晶電視最主要的就是顯示屏的表現,三星的顯示屏想必大家都非常清楚,很多廠商高端電視都採用的三星屏,並且將採用了三星屏作為一大亮點來宣傳,這次體驗的是三星UA55NUC30SJXXZ 55英寸4k超高清智能曲面電視
  • 暴力測試顯示三星Galaxy Z Flip的超薄玻璃和塑料屏一樣容易刮花
    【環球網科技綜合報導】2月17日消息,暴力測試機構JerryRigEverything近日對三星Galaxy Z Flip進行耐用性測試,結果顯示三星Galaxy Z Flip的柔性超薄玻璃屏幕與其他採用柔性塑料屏幕的摺疊屏手機一樣容易刮花。
  • 三星Galaxy Z Flip摺疊手機評測:性能最強的翻蓋手機
    日常使用更接近於普通手機的體驗,需要便攜的時候它能從屏幕中間對摺起來,變成只有一半大的方塊。當然摺疊起來的厚度是展開的兩倍。為了達到摺疊的效果,三星使用了一種超薄的玻璃。這種玻璃的柔韌性幾乎與三星自家的Galaxy Fold和摩託羅拉Razr所使用的塑料OLED屏一樣。超薄的玻璃其耐用性肯定是不如普通手機。
  • 白雲機場「全息投影」交互電梯來了
    屏幕懸浮在眼前,手指戳戳空氣就能操縱設備,科幻片裡出現的畫面奔現了~~4月23日,白雲機場首臺可交互全息投影操控的電梯正式投入使用
  • 三星最新摺疊屏手機正式發布!售價萬元還不貴?
    今日,三星Galaxy 2020新品發布會正式舉行,會上三星正式發布了第二款摺疊屏機型三星Galaxy Z Flip。
  • 三星Galaxy Z Flip評測:更輕巧便攜
    了解GalaxyFold的朋友應當了解,為了更好地可以實現顯示屏可彎曲,那時候其選用了聚醯亞胺薄膜材料。到了GalaxyZFlip這兒一個比較大的轉變在於,此次三星引進了UTG(UltraThinGlass)超薄玻璃技術性。相對性聚醯亞胺薄膜材料,玻璃的益處主要體現在三個層面:強度高、薄厚薄及其透光性好。
  • AR濾鏡新功能來襲 Snap/微美全息等如何玩轉AR市場
    近日,Snap的AR濾鏡工程團隊在英國倫敦推出首個大規模、持續性的多人LBS AR濾鏡:City Painter。City Painter的玩法足夠簡單,只需要將Snapchat鏡頭對準倫敦景點卡爾納比街,即可以AR的形式將虛擬色彩塗鴉在街道上,裝飾周邊的商店。該AR濾鏡類似於Metaverse等虛實結合空間的概念,未來可用於節日慶典、文旅、多人遊戲等場景。
  • 視頻會議軟體ZOOM市值超IBM獲資本青睞,微美全息實時AR虛擬場景...
    截至2021財年第二財季,Zoom擁有10名員工以上的客戶達到37萬個,較上年同期增長458%。其中,貢獻收入超過10萬美元的客戶達到988個,較上年同期增長112%。Zoom執行長袁徵(Eric Yuan)透露,在該季度,埃克森美孚新成為Zoom的客戶。不久前,Zoom展示了全新的增強現實功能。
  • 5G全息展示系統黑科技助力進博會,微美全息引領AR+AI全息通訊直播...
    據現場實測,在進博會主場館下載一部4個G左右的高清影片只需要約15秒。中國聯通上海分公司文旅行業中心副總監康嘉瑋介紹:「全息影像的傳輸涉及到的帶寬特別大,傳統的4G網絡可能不太行,現在依託於5G網絡大帶寬的特性就能保證到大的實時採集信息,能夠傳送到前方演播室,同時由於它是現場直播的實時畫面,低延時的特性也是十分重要。」
  • 洛杉磯SoFi體育場獨家使用三星的戶外4K LED顯示屏
    據報導,三星宣布其戶外4K LED顯示屏獨家用於美國洛杉磯SoFi體育場的中央懸掛雙面視頻板和五面顯示板上,總共7萬平方英尺(約6503平方米),將大幅提升球迷的觀感體驗。本次安裝的顯示屏總共使用了近8000萬顆LED,實現有史以來最大的LED播放內容。每一個顯示板塊能夠實現獨立或統一編程。這是到目前為止,在體育場或娛樂競技場上使用過的最多LED顆數的顯示屏,也是首次和唯一一次在體育場實現4K端對端的視頻製作。
  • 人工智慧技術助力實時虛擬角色製作提質升級
    製作人員還可根據需要利用配套的Motion Effects工具對生成的動畫形象進行調整。「新小微」以新華社記者趙琬微為原型,採用人工智慧技術還原真人髮膚,在立體感、靈活度、可塑性、交互能力和應用空間等方面較前一代AI合成主播(2D形象)有了大幅躍升,並實現了從單一景深機位到多機位多景深、微笑播報到多樣化精微表情播報等進步,播報形態可通過不同角度全方位呈現,立體感和層次感明顯增強。
  • 三星Galaxy Z Flip評測:體驗三星的2次摺疊
    如果說去年採用外折方式的Galaxy Fold是讓手機從小變大,由手機變成小平板的模樣,那麼內折的三星Galaxy Z Flip則是讓窄長的手機其顯示屏(21.9:9比例),從小變得更小,直至粉餅盒的狀貌握於掌心。