當5G碰撞3D,會實現什麼新功能?遠程手術、VR看房、全息投影…

2020-11-24 騰訊網

2016年,聯想和谷歌憑藉PMD獨家3D技術重新定義了行動裝置的新類別。2017年,蘋果iPhone X的Face ID帶火了3D視覺,機器能更準確地識別和認知用戶。但由於蘋果打造的上遊壟斷,該技術無法大規模應用,安卓手機的3D視覺解決方案面臨著成本過高、產能有限的問題。

為了打破壟斷格局,一家企業「另起爐灶」,結合自主設計研發的微納光晶片,提出了除蘋果以外唯一具有自主智慧財產權並且可以量產的3D技術光方案,為3D視覺技術應用帶來了更多維度、更低成本的可能性。

本期「追光者-5G引領數位化」欄目,我們邀請到這家專注於AI和軟硬體結合的3D視覺公司——光鑑科技創始人&CEO朱力,探索3D能否成為5G應用的殺手鐧?

朱力,光鑑科技創始人&CEO

說在前面的話

攝像技術經過200多年的發展,走過「從黑白到彩色」、「從低解析度到高解析度」、「從靜態到動態」、「從2D到3D」四次重大變革,如今我們終於可以記錄真實的 3D 世界, 不是被限制在膠 、紙張、屏幕此類二維媒介上。

5G的到來讓人的空間和時間產生巨變, 、機器、雲端能夠 限制地互動。所以,我想用「要有光」這個詞來形容我們正處的時間點和機遇。在混沌中,要有光,於是便有了光。

網絡上關於5G的科普已是鋪天蓋地。我作為 個在電 工程領域浸淫了 年的 程師,聽到毫 波、1024 QAM、MIMO、波束成形這些名詞, 就跟貓爪子撓似的痒痒,這種感覺就跟 們看到桌 上擺著La Mer,SK-II, 喊著我要 一樣。但這些 5G新技術是不是真的是我們需要的東西呢?

我們搞技術的,還是得「說 話」。普通大眾需要的不是新技術, 是生活 最本質的需求得到滿足。技術是撬動這些需求的槓桿。

3D改變了什麼?

180年前,法國 達蓋爾發明了世界上第 臺能夠洗出照 的相機。在這長達兩個世紀的時間 ,大家幾乎默認「拍攝」這一操作獲得的就是 個「畫面」。漢字對於「畫面」的解釋很有意思:畫在面上。但面是二維的,所以我們習慣在紙上或屏幕上獲取信息。

現在,事情正在發生本質的變化,很多 口袋 就有可以拍攝3D照片的3D相機,iPhone、華為、三星、Oppo、Vivo 等 機都搭載了結構光或者ToF的3D相機。這意味著我們能夠以更低成本獲取3D圖片,不光了解圖片的內容、像素、顏色,還能得知超越平面的像素深度等等。與此同時,3D 顯示技術也在快速發展。隨著AR/VR/MR產品逐漸普及,裸眼3D趨於成熟。如今在網上花幾十塊錢就能買 個 3D 貼膜,通過匹配的APP就可以在普通 機上觀看3D視頻、玩3D遊戲。從2D到3D,多的不只是一個維度,更是真實世界的還原。

3D感知由來已久,但為什麼最近又在業內引起熱議?主要是技術的成熟。3D感知主要受益於三種技術,包括雷射技術、納米光子技術和 AI技術。雷射是具有高精度準直的光束,讓我們看見立體的世界。納 光 技術能夠突破各種經典波動光學的束縛,讓我們看清這個世界; AI技術的發展,讓服務於人類的各種機器能夠看懂這個世界。

3D+5G能實現哪些原本沒有的功能?

3D技術的突破讓人手一臺3D相機成為可能,5G的應用能使人和物快速穩定地連接在一起。這兩者結合能在哪些方面帶來火花呢?我們回歸前文,主要從看清和看懂這兩個角度出發思考。

現在3D技術已落地在許多成熟商用場景,包括VR看房,在手機屏幕上輕輕一划就可以還原房子3D全景,但這僅僅是3D技術的離線分享。客觀來說,如果3D攝像頭想要完美地重現原始圖像,仍需要一定的後期處理過程,但由於大多數人的手機終端並沒有強大的GPU以支撐3D圖像的優化拼接、渲染等等,因此很難實現實時處理。

而5G的到來將會使3D圖像「動起來」。5G網絡速度已經非常接近普通手機快閃記憶體的存儲速度,在5G普及以後,3D圖像可以由終端轉移至雲端處理器上,實現前端採集-後端處理-返回前端的閉環過程,方便我們實時重建3D圖像。既然實現了3D圖像的創建和重構,那還可以通過彼此的3D圖像進行社交互動,這塊領域給我們留了很大的想像空間。

看清是前提,看懂比看清更重要。當我們抓取數據後,需要結合大量的AI算法,讓機器人通過3D感知更快速準確地「翻譯數據」並作出實時反應。以自動駕駛為例,要讓車輛更安全高效的行駛,必須能夠實時準確了解前方道路狀況,評估各種可能的場景,並採取最佳的應對措施。當5G將汽車和雲端連接起來,可以解放終端做更多的事情。不僅可以通過汽車本身的雷射雷達定位,還能夠通過5G信號進行定位和匹配,從而使車輛實時準確了解前方道路狀況,評估各種可能的場景,並採取最佳的應對措施,實現更安全高效的行駛。

當3D遇上5G,將會如何改變我們的生活?

1、碎片時間節省

3D與5G的碰撞是視覺技術與通信技術的變化,能夠在很多細節處節省時間。舉個例子,當我從深圳飛到北京見一個人,是因為我希望與對方面對面互動。一個直觀的互動能夠解決很多我們從文字和語音中無法解決的問題。3D與5G的結合帶來了什麼?3D技術能夠將萬事萬物真實再現,在5G網絡的加持下,我們通過3D全息投影也可以實現面對面般的溝通體驗,未來將會有更多時間在線辦公,減少花費在路上的開銷。

2、更好的醫療

以下展示的兩幅圖畫並不是科幻圖,而是一家以色列公司製作的真實圖片。這家公司通過3D成像和顯示技術,將人體器官完整顯示出來,醫生可以肉眼看到病人的患病部位從而進行病情診斷。

醫生診斷病情之後如何參與治療呢?其實很多微創手術已經通過機械手臂實現了,醫生完全可以遠程手術操作。但關鍵點在於,此過程需要一個非常穩定且延時極低的網絡,它的延時甚至需要小於或等於人手神經傳遞到大腦神經的速度,在醫生雙手感知之前,能夠把信息反饋回來。

而5G的到來讓我們發現,這些技術都「萬事俱備」了,遠程手術已經成為可能。

3、更好的教育

疫情之下,在線教育迎來了新一輪發展機遇,但現階段直播課堂的呈現方式是平面的,仍受限在物理空間。儘管老師講的興致勃勃,另一頭的學生也只能看著屏幕裡的畫面。如果我們能夠通過3D和VR技術,打造立體化的教學場景,讓課堂呈現視覺、聽覺,甚至觸覺方面的一體化。那不僅可以通過實時語音進行互動,動作捕捉設備和體感設備也讓我們通過手勢和肢體動作進行交流成為可能。

除了生活、醫療、教育,3D和5G還會在我們身邊的方方面面創造出新驚喜。即使暢想不會一蹴而就,但每個創新者背後的努力,都在為未來的美好積累能量。

光鑑科技正在做的,就是通過3D技術實現更好的感知。正如刻在伯克利校門上的拉丁文Fiat Lux,翻譯過來是「要有光」。我們希望通過光把世界看清楚,用光去感知和理解世界,讓美好的生活多一些光。

騰訊5G生態計劃首期行業應用合作夥伴招募中

依託騰訊AI Lab、Robotics X、音視頻實驗室、未來網絡實驗室、網絡平臺部、騰訊START雲遊戲平臺的產品、技術和網絡能力,聯合運營商、終端品牌、設備廠商等合作夥伴的強大資源,背靠騰訊豐富的多媒體內容和應用場景,通過技術能力、用戶流量、渠道資源、品牌資本等,攜手運營商、5G應用開發者,探索新應用、新內容和新場景,協同騰訊5G城市計劃,共創5G新生態。

相關焦點

  • 如今我們對5g有什麼幻想,未來世界就將會什麼樣子!
    現在的我們只是實現人與物的連接,那個時候人與物、物於物,都能夠連接起來!現在可能你會不明白,物與物是如何連接的?具體的例子在下面會提到。看完例子你就能明白了!特點三:uRLLC高可靠低時延。高可靠,就是傳輸數據時更加安全。每一代移動通信的提升換代都會將更安全、更可靠作為一個重要的點,5g也一樣!
  • 全球首例「MR+5G」全息投影遠程靜脈濾器植入術完成:實現北京宜賓...
    2020年12月9日,解放軍總醫院心血管病學部陳韻岱主任團隊通過混合現實(Mixed Reality,MR)和5G全息投影技術,遠程完成一例在宜賓市第二人民醫院進行的下腔靜脈濾器植入術。這是國際上首次將5G全息技術與MR技術相結合,遠程完成下腔靜脈濾器植入術。
  • 3d全息投影原理_3d全息投影視頻 - CSDN
    他們研製的第二款投影晶片,將可以實現全息三維投影,立體影像可以漂浮在空氣中,看上去就像是一個真實存在的物體。第一款晶片推出幾個月之後,第二款晶片也將開始進入生產製造。另外除了智慧型手機之外,該公司研發的三維全息投影晶片,還將進入到各種顯示設備中,比如電視機、智能手錶,甚至是"全息桌面"。屆時,三維全息投影時代將真正到來。
  • 3D全息投影、裸眼3D以及VR各自的區別
    3D全息投影也稱為虛擬成像技術,是一種利用幹涉和衍射原理來記錄和再現物體真實3D圖像的技術。全息投影技術不僅能產生立體空中幻覺,還能使幻像與表演者互動,共同完成表演,產生震撼的表演效果。3d全息投影技術裸眼3D是一種三維圖形,裸眼3D使用戶無需戴3D眼鏡就能看到3D圖片。
  • 陳韻岱教授團隊完成Mixed Reality +5G全息投影技術指導下遠程靜脈...
    12月9日,解放軍總醫院心血管病學部陳韻岱主任團隊通過混合現實(Mixed Reality,MR)和5G全息投影技術,遠程完成一例在宜賓市第二人民醫院進行的下腔靜脈濾器植入術。這是將5G全息技術與MR技術相結合,遠程完成的下腔靜脈濾器植入術。
  • 3d全息投影的報價受哪些因素所影響?
    3D全息投影是一種使用光學折射和衍射來實現幻影成像的技術。它分為三類:360度全息投影,270度全息投影和180度全息投影,適用於不同場合。它的價格受到很多方面的影響,今天小編就介紹一下影響3D全息投影製作價格的因素:3d全息投影1.搭建材料:不同的設備需要採用不同的搭建材料
  • 臺灣3d全息投影風扇廠家價格_紅岸天驅自主研發
    臺灣3d全息投影風扇廠家價格,紅岸天驅自主研發,科技、創新、進無止境。 3d全息投影的報價受哪些因素所影響?傾影科技|3D全息投影為娛樂文化注入新血液!傾影科技|全新3D全息投影技術火爆來襲!全息婚禮究竟是什麼?隨著科學技術的進步,全息婚禮到來的時間也隨之改變。
  • 5G+遠程全息互動、+VR出現,5G+混合現實的市場還會遠嗎?
    VX Entertainment為企業活動所呈現的全息技術與混合現實技術已不止一次地出現在各大媒體與電視視頻中,混合現實這一新興領域有巨大的發展潛力,也會為工業、醫療、文化、教學等方面開闢新穎的視覺模式。
  • 比全息更好的3D投影,僅靠塵埃就能實現
    圖 | 將圖像投影在一種高速旋轉的鏡子上從而實現三維圖像相對於常規的全息投影,雖然我們看到的是一個三維圖像,但是其本質是通過一個個的二維平面構成;而這一新技術可以說是 2D 到 3D 的轉變,它將圖像直接從立體空間裡呈現了出來。
  • 空氣中的立體3D全息投影技術發展到什麼地步了?
    相對比傳統的投影技術來說,現在全息投影技術的發展可以說是更快速,並且能滿足各種不同行業領域的需求,給大家帶來與眾不同的視聽享受,帶來更震撼的互動視聽體驗,滿足各種不同群體的應用要求,所以現在全息投影技術開始更加受歡迎,滿足大家對于震撼視聽享受的要求。
  • 5g全息投影概念股有哪些?5G全息影像通信成功演示
    綜投網(www.zt5.com)3月7日訊  據媒體報導,韓國電信公司KT在全球首個商業5G服務發布之前成功演示了全息通信KT在首爾麻浦區Nuri Dream Square上舉辦的K-Live全息圖演唱會上通過將5G網絡與一個漂浮的全息圖像系統連接起來,實現了首爾與洛杉磯之間的「全息通話」。KT正計劃將其全息圖遠程投影技術商業化。  業內表示,5G將實現真正的萬物互聯,為移動通信帶來無限可能性。以往科幻電影中出現的全息視頻通話也或將在5G時代落地。
  • 三分鐘自製3D全息投影,讓你看到目瞪口呆!
    看過鋼鐵俠的朋友應該也都對託馬斯達克家印象深刻那酷到沒朋友的全息影像技術能在虛擬世界與現實世界
  • 汕尾工廠大型3d全息投影系統價格_能欣文化科技
    汕尾工廠大型3d全息投影系統價格,能欣文化科技,    能欣遠景目標是在立足自主核心技術產品基礎上,整合其他產品與技術服務,向系統接口標準化、系統信息集成化、系統運作智能化、系統管理統一化,系統應用簡單化方向發展,在若干年內成為優秀的行業整體解決方案提供商,為我國乃至全球的自動化與智能化,多媒體技術進步作出我們添磚加瓦的貢獻。
  • 論VR與3D以及雷射全息投影的區別與特點
    人們逐漸了解3D、VR等科技類名詞,那麼同樣作為讓觀眾產生身臨其境體驗的VR、3D和雷射全息投影,他們的區別又在哪裡呢?  VR:交互式虛擬實境體驗  VR(Virtual Reality)即虛擬實境技術,它是利用計算機為用戶提供一個交互式的可沉浸的身臨其境的虛擬三維空間。
  • 中興成功研發5G全息投影視頻通話
    打開APP 中興成功研發5G全息投影視頻通話 百家號 發表於 2019-09-06 10:39:02 就在昨天,中興通訊與Orange在西班牙瓦倫西亞Global 5G Event期間現場展示了5G應用創新體驗:5G全息投影視頻通話。沒錯,以前我們只有在電影中才能看到了打電話就像面對面交流一樣,如今變成了事實。在這個萬物物聯互通的時代,只有你想不到沒有什麼不可能!
  • 科學網—真正的全息投影「在路上」
    「真正的全息要提供光的相位信息,這樣觀眾看到影像才會有景深的感覺,遠近感由此產生。」胡憲旺說。 那麼,如何實現全息投影呢? 桑新柱告訴《中國科學報》,全息投影基於幹涉原理記錄,即利用相長和相消幹涉形成明暗相間的幹涉條紋記錄光的相位信息,顯示時再用參考光照射全息圖,形成衍射光波的再現光的三維光場信息分布。全息投影可以看作是一種三維光場顯示技術。
  • 裸眼3D全息投影
    因此,裸眼3D全息投影技術的發展則讓人類擺脫了立體眼鏡的束縛。(振幅、相位)來實現3D視覺效果。180°適合單面展示,一般應用在3D成像面積較大的舞臺全息投影,並且可以實現互動;360°可將成像投射在實景的半空中,形成縱深感,從任意角度觀眾均可觀看。3D全息投影技術的產生,不僅解決了3D投影技術必須佩戴眼鏡才可以觀看展示設計的問題,更使全息投影技術無法全方位無死角的弊端得以改進。當前,裸眼3D全息投影技術的運用十分廣泛,涉及各個領域。
  • 5G、全息投影、AI上陣,醫療行業按下"加速鍵"
    近日,全球首個5G+全息遠程診療系統開通,通過全息影像展示及全息直播互動技術,實現了遠程全息醫療影像的實時傳輸和互動。從技術角度而言,5G保證了全息影像、反饋畫面及信息等大數據的快速傳輸,從而實現超低延時和穩定的雙向影像直播效果。5G的發展讓全息投影技術的未來充滿想像,它與醫療的結合亦為行業與生命帶去未知的驚喜。除此之外,科技與醫療,又能迸發出怎樣的花火?
  • VR算什麼?全息投影才是最終方向
    全息投影,beyond超越beyond演唱會裡出現的黃家駒,還有邁克傑克遜,還有今年央視裡李宇春也採用了全息投影,這些都給我們視覺衝擊感。想像如果有一臺強大的主機,把遊戲畫面模擬顯示在一定區域,而你身在其中。比如你玩街頭霸王,你面前3.4米外就是拳皇3D角色,玩起來那是什麼感覺?
  • 全息投影是什麼?全息投影應用在哪些方面?
    什麼是全息投影: 全息投影技術(front-projected holographic display)屬於3D技術的一種,原指利用幹涉原理記錄並再現物體真實的三維圖像的技術。