Facebook開發超採樣技術,虛擬實境進一步更新

2021-01-08 澎湃新聞
Facebook開發超採樣技術,虛擬實境進一步更新

2020-07-06 11:20 來源:澎湃新聞·澎湃號·湃客

文/陳根

SIGGRAPH  2020大會即將召開,Facebook研究人員近日更新了一篇文章,介紹了「神經超採樣」(neural supersampling)技術。這是一種根據人工智慧機器學習為基礎的提高圖像清晰度的算法技術,跟NVIDIA的DLSS「深度學習超採樣」技術相似。不同的是,這個神經超採樣並不需要專門的硬體或者軟體就能實現,基本可以媲美DLSS的效果。

這種「神經超採樣」算法可以獲得低解析度的渲染幀並將其放大16倍,這意味著未來科技方向上將發生更多的變化。例如,未來的耳機,理論上可以驅動雙3K面板,每隻眼睛只渲染1K——甚至不需要眼睛跟蹤。

能夠以較低的解析度進行渲染,意味著更多的GPU功能可以自由運行詳細的著色器和高級效果,這可以彌合從移動虛擬實境到控制臺虛擬實境的差距。雖然這並不能把移動晶片變成遊戲機,但它應該在某種程度上縮小差距。

Facebook聲稱它的神經網絡是最先進的,它的性能超過了所有其他類似的算法——這也是它能夠實現16倍升級的原因。在所提供的示例圖像中,Facebook的算法似乎已經達到了可以重建線條或網格圖案等精細細節的地步。 

事實上,早在3月份,Facebook就發表了一篇類似的文章。文中描述了利用神經上採樣來釋放GPU功耗的思想。研究人員的期望找出一個「框架」,在當前的渲染管道(低延遲)內實時運行機器學習算法,他們實現了這一點。將該框架與神經網絡相結合可以使這項技術實用化。

隨著AR/VR顯示器向著更高解析度、更快的幀速率和更高的真實感的方向發展,神經超採樣方法可能是通過從場景數據中推斷出清晰細節而不是直接渲染這些細節的關鍵。這項工作為未來的高解析度虛擬實境指明了方向,不僅僅是顯示器,還有實際驅動所需的算法。

目前,這只是一個研究,研究人員「相信通過進一步的網絡優化、硬體加速和專業級的工程設計,這種方法可以明顯更快」。Facebook將這種方法歸類為「神經渲染」,科技的更迭正以超出了任何人的預期的速度發展著。

關鍵詞 >> Facebook,虛擬實境,科技

特別聲明

本文為澎湃號作者或機構在澎湃新聞上傳並發布,僅代表該作者或機構觀點,不代表澎湃新聞的觀點或立場,澎湃新聞僅提供信息發布平臺。申請澎湃號請用電腦訪問http://renzheng.thepaper.cn。

相關推薦

評論()

相關焦點

  • vr虛擬實境技術前景分析,虛擬展示技術應用
    打開APP vr虛擬實境技術前景分析,虛擬展示技術應用 蛙哥有話說 發表於 2020-12-10 11:07:20 vr虛擬實境技術自5G出現以來頻頻出現在人們的眼前,早在16年vr虛擬實境技術爆發一段時間之後這一技術也渡過了中間的寒冬期,那麼如今vr虛擬實境技術前景怎麼樣呢?
  • 對話新經濟人物|Unity張俊波:遊戲引擎讓虛擬技術創造現實價值
    近日,Unity大中華區總裁張俊波在接受封面新聞記者專訪時表示,5G、人工智慧等技術將人和計算資源拉得更近,推動了原本應用在遊戲開發中的3D交互技術向真實世界普及。張俊波認為,未來,藉助遊戲引擎技術,將現實世界虛擬化為3D世界,同物聯網等結合用以大型設施的規劃、預覽和模擬將成為一種趨勢。
  • AR增強現實技術的原理及現實應用
    AR 增強現實技術通過將虛擬信息與真實環境影像疊加的方式進行即時性信息數據交互。虛實交融的AR 增強現實將我們周圍的整個世界變成交互式對象,這種新的信息交互模式亦會逐漸改變我們的生活。增強現實技術在生活中的應用範圍越來越廣。
  • 走近虛擬實境 | 虛擬技術增強版XR來了
    走近虛擬實境 | 虛擬技術增強版XR來了 2020-12-09 19:50 來源:澎湃新聞·澎湃號·政務
  • 採用虛擬實境技術訓練中小學生建立一種自我意識和自覺性
    vr又稱靈境技術,是模擬虛擬環境產生真實世界的三維立體感受,又名看穿或看破。有虛擬駕駛、虛擬搖籃、虛擬家園、模擬人工世界、仿真草地、仿真動物園、虛擬狩獵場景、仿真森林、虛擬農場、仿真沙漠、虛擬海灘、虛擬賽車場景、仿真槍擊遊戲等等。
  • 四川長江職院成功舉辦虛擬實境技術在職業教育中的應用研討會
    進一步推動信息技術與高等教育的深度融合,加強高等學校虛擬實境技術的應用和交流,11月24日,由四川長江職業學院、成都小微雲聯科技有限公司主辦,成都ACM SIGGRAPH學會、成都虛擬與增強現實產業協會以及成都市人工智慧產業協會協辦的「虛擬實境技術在職業教育中的應用研討會」在四川長江職業學院召開
  • 虛擬實境VR人機互動中的輸入和輸出技術探討
    虛擬實境(Virtual Reality,VR)是新興計算機形態之一,是自然交互的重要組成部分。2010年以來,隨著Oculus、HTC Vive、Google Glass、PsvR、Micro soft hololens等商用頭戴式顯示設備(Head- Mounted Display,HMD)的發行,虛擬實境、增強現實(Augmented Reality,AR)技術逐漸進入人們的日常生活。
  • 利用虛擬工藝建模贏得全球半導體技術的競爭
    過去的開發人員需要準備多種測試晶圓來確定特定器件的最佳工藝需求。他們需要先製造一組晶圓並對其做分析,然後基於分析結果來改進下一輪的製造工藝步驟。隨著特徵尺寸的縮小,每次更新的工藝會對變量更加敏感。在測試時還必須考慮之前的開發中可能忽略的特徵和寄生現象,這進一步提高了測試的複雜性和數據量。
  • 布加迪:傳統黏土模型汽車設計工藝已經結束 虛擬實境技術取而代之
    如今,設計師使用的是虛擬實境技術,而布加迪就是使用這樣設計方式的一員。日前,布加迪設計負責人Achim Anscheidt在與媒體訪談期間透露,黏土模型時代已經結束,取而代之的是虛擬實境技術。向虛擬實境技術的轉變已經討論了20年,但這種轉變現在才剛剛起步。
  • Oculus首次推出了Quest 2虛擬實境耳機的首次重大更新
    打開APP Oculus首次推出了Quest 2虛擬實境耳機的首次重大更新 綠色消費網 發表於 2020-12-18 10:50:08
  • NVIDIA深度學習超採樣技術支持VR:4K、8K VR的福音?
    NVIDIA一直致力於顯卡渲染能力優化,近期不僅推出RTX30系列顯卡,還升級了深度學習超採樣技術DLSS 2.1版,加入對VR的支持,有望大幅提升VR的渲染效率和畫質。那麼DLSS到底是什麼呢?它還有一個優勢在於,由於是RTX顯卡自帶技術,因此DLSS在效果與MSAA等抗鋸齒技術相當的情況下,渲染效率更高,可節省更多算力,用於提升光線、紋理的渲染細節或刷新率。後來在今年3月份,NVIDIA宣布推出DLSS 2.0版,與1.0版相比,新版本的AI渲染速度可達到原來的二倍,也就是說同樣解析度和配置情況下,刷新率進一步提升。
  • 《虛擬實境消防安全體驗系統技術標準》編制組首次工作會議召開
    來源:天津消防研究所2020年12月7日,由應急管理部天津消防研究所牽頭的中國消防協會團體標準《虛擬實境消防安全體驗系統技術標準》編制組成立暨首次工作會議順利召開,本次會議採用線上會議方式舉行。應急管理部天津消防研究所、深圳因特安全技術有限公司、福建省華漁教育科技有限公司、南京睿悅信息技術有限公司、北京中德啟銳安全設備有限公司、天津中科正澎信息科技有限公司、深圳尼古拉能源科技有限公司、青島小鳥看看科技有限公司和深圳創維新世界科技有限公司等單位相關專家學者參加會議,中國消防協會金玉高工和天津所肖磊副書記出席了會議。會議由天津所工程消防研究室宋文琦副主任主持。
  • 西安市九院神經外科運用虛擬實境技術精準切除顱內膠質瘤
    陽光訊(王敏 記者 鄭亞雷)近日,西安市第九醫院神經外科團隊運用功能核磁定位聯合AR技術,為來自湖北的患者陳先生精準切除顱內膠質瘤。陳先生因腫瘤位於大腦功能區,術前已經出現了嚴重的右側肢體偏癱和語言功能障礙。
  • 以賽促升「軟實力」,南京創新周即將上演虛擬實境產業科技大賽
    大賽聚焦當下熱門的虛擬實境產業,以比賽的形式發掘、培養一批優秀的企業和人才,從而助力南京虛擬實境產業高質量發展。虛擬實境產業近年來一直被視為風口產業,隨著軟硬體的不斷升級進步和行業企業的不斷增加,虛擬實境應用場景已經從遊戲、影視等方面,擴展到教育、醫療、建築、工業等越來越多領域。
  • 採用Java技術和Java 3D虛擬實境技術實現設備遠程監控系統的設計
    本研究採用了傳感器驅動的虛擬實境輔助監控的方法。虛擬實境技術是指綜合利用計算機圖形系統和各種現實及控制等接口設備,在計算機上生成的、可交互的三維環境技術,具有沉浸(Immersion)、交互(Interaction)和構想(Imagination)等三個基本特徵。但由於這樣的系統造價高昂,操作複雜,尚無法在普通的工作環境中得到應用。
  • 虛擬實境技術能為殘疾人士提供哪些幫助?
    消息來源於微信公眾號:VR心理健康 已經發現虛擬實境(VR)技術對不同的殘疾人有多種用途。 來自英國Chichester的Sienna Fisher自出生以來就患有一種肌營養不良症,因此無法實現獨立行走。
  • PS4 5.50系統升級:更新超採樣可從U盤導入壁紙
    據外媒Gamespark報導,SIE今天將會上線PS4 5.50版本大規模更新「慶次(KEIJI)」。據稱目前SIEJA(日本及亞洲)已經推送了更新,一起來了解一下。本次補丁首先將加入家長控制功能,監護人將能查看PS4的登陸時間,並且對孩子的遊戲時間進行限制。
  • 當科技遇上藝術 虛擬歌手:讓技術承載心聲
    虛擬歌手通過將創造機會分享給普通人,以新的技術形式帶來具有活力的新文藝形態日前,在一場全息演唱會上,「初音未來」「洛天依」等虛擬歌手通過VR(虛擬實境)投影技術,以數位化方式向萬餘觀眾奉獻了一場別致的演出。
  • AMD正開發顯卡新技術
    AMD很為人稱道的一點是,技術開放的姿態,也就是樂於做跨平臺、開源的支持,而不是封閉自重。剛剛推出的RX 6000系列顯卡,首次支持了硬體級的光追技術。不過,為了後續新遊戲以及中低端顯卡考慮,AMD也亟需配套類似NVIDIA RTX顯卡的DLSS(深度學習超採樣)技術。
  • VR虛擬實境技術是一門什麼技術?為我們帶來什麼?
    今天炫境數字科技在這裡和大家一起來看看關於VR虛擬實境技術是一門什麼技術?因為這行業剛出來也沒多久,是走向未來發展的產品,當然也有很多的人對其特別的好奇和喜愛,同時也有許多人會有一些疑問?那就是VR虛擬實境技術能夠給我們帶來什麼?會在哪些行業運用?那麼接下來我們就一起來看看。