Nature:用光子處理器提升人工智慧計算速度

2021-01-09 別鬧了機器

編輯/文龍

當今社會,人工智慧正在改變臨床診斷、自動駕駛、語音翻譯等各個領域。但是,數據量的快速增長給AI中使用的電子計算硬體帶來了巨大的挑戰,計算速度和功耗問題已成為人工智慧的主要瓶頸。Xu等人和Feldmann等人的兩篇論文報告了一種通過利用光的獨特屬性來加速AI處理的光子處理器。這些報告引發了光學計算的復興。

隨著人工智慧的興起,傳統的電子計算方式逐漸達到其性能極限,遠遠落後於可處理數據的快速增長。在各種類型的AI中,神經網絡由於其出色的表現而被廣泛用於AI任務中。這些網絡使用多層相互連接的人工神經元執行複雜的數學運算,其中佔用了大多數計算資源的基本運算是矩陣向量乘法。

研究人員進行了各種努力來設計和實現特定的電子計算系統,以加速人工神經網絡中的計算。尤其是專用集成電路、腦啟發計算和內存內計算(使用稱為憶阻器的一組存儲設備在原位執行計算)等定製晶片的使用已經取得了相當大的成功。

雖然在電子計算中信息的載體是電子,但是光子長期以來一直被視為一種可行的替代方案。由於光譜涵蓋的波長範圍更加廣泛,許多不同波長的光可以同時進行多路復用(並行傳輸)和調製(改變得可以攜帶信息),而不會相互幹擾光信號。此外,信息以光速傳播會使時間延遲達到最小,無源傳輸(不需要輸入功率)有助於超低功耗,並且相位調製(用來改變光波的量子力學相位)使光可以輕易地在大於40 GHz的頻率下調製和檢測。

在過去的幾十年裡,光纖通信取得了巨大的成功。但是,利用光子進行計算仍然具有挑戰性,尤其是在與先進的電子處理器相當的規模和性能水平上。其困難來源於缺乏合適的並行計算機制、允許人工神經元進行複雜的高速非線性響應的材料以及可集成到計算硬體中的可擴展光子設備。

幸運的是,過去幾年中一種被稱為光學頻率梳的設備的發展為集成光子處理器帶來了新的機遇。光學頻率梳是一種具有發射光譜的光源,其頻譜由成千上萬條離散的、等距的頻率線組成。這種設備在光譜學、光學時鐘計量學、電信等各個領域都取得了巨大的成功,並獲得了2005年諾貝爾物理學獎。光學頻率梳可以被用作光學計算的節能電源集成到計算機晶片中,並且該系統非常適合通過波長復用進行數據並行化處理。

Xu及其同事就是使用這種設備來製造通用的集成光子處理器,該設備用來執行一種相當於圖像處理中的卷積的矩陣向量乘法。Xu和他的團隊使用了一種巧妙的方法來實現卷積:首先用色散讓波長復用的光信號產生不同的時間延遲(光的傳輸速度取決於其波長),然後沿著與光的波長相關的維度組合這些信號。

通過充分利用大範圍的光子波長,Xu和他的團隊實現了本質上是不同卷積運算的並行計算。使用單個處理內核的光計算速度超過 10 萬億次/秒,並且僅受數據吞吐量的限制。這項工作值得肯定的另一點是,他們還確定了其光子卷積處理器在實際應用中的切入點。他們建議處理器在光電子混合框架中使用,如在光纖通信過程中進行原位計算。

用於矩陣向量乘法的處理器的示意圖

Feldmann和他的同事也獨立地製造出一個集成光子處理器,該處理器可執行涉及跨越二維光信號的卷積。該設備在基於相變材料(可以在非晶相和結晶相之間切換的材料)的內存內計算架構中使用了光學頻率梳。他們通過波長復用和使用相變材料集成的單元陣列模擬矩陣向量乘法,對輸入數據進行了完全並行化處理。

這種高度並行化的框架具有在單個步驟中高速處理整個圖像的潛力。此外,原則上來說,該系統可以按照商業製造規程進行大規模擴展,並有助於在不久的將來實現實時的機器學習。由於該卷積過程涉及無源傳輸,因此理論上光子處理器可以以光速和低功耗執行計算。對於像雲計算這種能源密集型應用而言,這種能力是非常有價值的。

鑑於傳統電子計算方式面臨諸多挑戰,集成光子技術的出現或許能成為實現未來計算架構性能大幅提升的潛在繼任者。但是,構建實用的光學計算機將需要材料科學、光學、電子學等領域的研究人員共同努力,加強跨學科合作。儘管報導的光子處理器具有較高的單位面積計算能力和潛在的可延展性,但是完全光計算的規模(光學人工神經元的數量)仍然很小。並且,能量效率受到固有地吸收光的計算元件以及電信號和光信號需要頻繁相互轉換的限制。

另一個研究路徑是開發高等非線性集成光子計算體系結構,而不是一維或二維線性卷積。通過將電子電路和數千或數百萬個光子處理器集成到合適的體系結構中,同時利用光子和電子處理器的混合光電框架可以在不久的將來革新AI硬體的發展。這樣的硬體將在通信、大數據和雲計算等領域具有重要的應用。

https://www.nature.com/articles/d41586-020-03572-y

Huaqiang Wu & Qionghai Dai

相關焦點

  • IBM推出光子張量核 速度是最先進人工智慧處理器兩倍多
    來源| ZDNet IBM的研究人員為了滿足算法對處理能力看似無休止的需求推出了一種新的方法,這可能意味著深度學習應用的大變化:執行計算的處理器用的完全是光而不是電。
  • 光子計算加快AI運算速度,Nature連登兩篇論文
    隨著人工智慧的爆炸式增長,其對算力的要求也越來越高。Nature最新一期,就連登了兩篇光學加速AI計算的論文,裡面介紹了兩個AI計算加速器:分別是11TOPS的光子卷積加速器和張量核光子加速器,兩者都可以達到每秒數萬億次的計算速度。光子處理器利用光的特性,可以加速人工智慧計算處理過程,同時,還會引領光子計算的復興。
  • 光子處理器:加速光學計算領域的變革
    但是,持續增加的數據量在為人工智慧(AI)提供源源不斷的「動力」的同時,也對用於 AI 的電子計算硬體提出了更多的挑戰,無論是在計算速度,還是在功耗方面,都已經成為嚴重製約 AI 發展的主要瓶頸之一。 如今,隨著用於自動駕駛汽車和語音識別等機器學習方法的出現,這種數據增加的上升趨勢仍將繼續下去。所有這些,都給當前的計算機處理器在滿足人們需求方面帶來了沉重的負擔。
  • Nature連發兩篇光子AI晶片論文!光子計算時代已至?
    芯東西(公眾號:aichip001)編譯 | 心緣編輯 | 漠影芯東西1月7日消息,人工智慧(AI)正改變臨床診斷、自動駕駛、語音翻譯等更多領域,而計算速度和功耗日益成為AI的主要瓶頸。傳統電子計算方法逐漸走向性能極限後,近幾年,關於用光學晶片加速AI的研究逐漸興起。
  • 速度提升百倍:顛覆性的光子計算來了-科技前沿,光子計算,晶片,大...
    曦智科技聯合創始人兼CEO沈亦晨表示,用光做數據傳輸不是一件新鮮的事情,光纖通信已經成為了業界標準。這反應出用光做數據傳輸無論是成本、能耗還是帶寬都遠優於電子。「我覺得光通信是實現光子計算的必經之路,從半導體的發展來看,也是先做通信再做計算,兩者最大的不同在於集成度。」沈亦晨表示。
  • 光子處理器達到前所未有的計算密度
    一個國際研究人員團隊開發了一種用於光子處理器的新方法和體系結構,可加快機器學習領域的複雜數學任務。越來越多的AI應用程式的出現(例如在自動駕駛汽車,智能城市和語音識別中)給當前的計算機處理器帶來了沉重的負擔,無法滿足需求。
  • 量子計算還沒搞懂,光子計算又要來統治世界?
    三分鐘搞懂量子力學之類的東西又火了起來,不過這個火還沒過去,一個新的概念—— 「光子計算」也迅速「橫空出世」引起了大家又一次轟動。伴隨 AI 的興起,傳統的電子計算逐漸達到性能極限,並落後於數據增長的速度,神經網絡對於 AI 當中各項處理能力均有上佳表現,而它通常採用的計算為矩陣矢量乘法。光學頻率梳的發展為繼承光子處理器帶來了新的前景,該類設備還獲得了2005 年諾貝爾物理學獎。
  • 計算速度是電子晶片1000倍,光子AI晶片商用產品今年面世!
    電子發燒友網報導(文/李彎彎)隨著AI晶片面臨算力瓶頸,用光子代替電子進行AI計算開始問世,目前已經有多家初創公司正在研究光子AI晶片,包括曦智科技、光子算數、Lightmatter、Luminous等。 與電子晶片相比,光子晶片的計算速度是其的1000倍,而且功耗僅為其百分之一。
  • 速度提升百倍,顛覆大數據處理的光子計算晶片來了?
    這也讓量子計算、神經擬態計算、光子計算這些前沿技術受到了越來越廣泛的關注。其實,業界對這些技術的研究都已經有幾十年的歷史,但出於各種因素,至今都還未大規模應用。光子計算在三種前沿計算技術中關注度較低,不過情況正在改變。準確率接近電子晶片,完成矩陣乘法所用時間可達到最先進電子晶片1/100以內的光子計算晶片,或將在不遠的將來顛覆大數據處理等應用。
  • 股市華興社:光子計算時代已至?
    股市華興社報導,股市華興社認為光子計算研究再登Nature,要革命AI硬體。芯東西1月7日消息,股市華興社了解到人工智慧(AI)正改變臨床診斷、自動駕駛、語音翻譯等更多領域,而計算速度和功耗日益成為AI的主要瓶頸。傳統電子計算方法逐漸走向性能極限後,近幾年,關於用光學晶片加速AI的研究逐漸興起。
  • 光子處理器:為 AI 加速 「變革」AI硬體
    但是,持續增加的數據量在為人工智慧(AI)提供源源不斷的「動力」的同時,也對用於 AI 的電子計算硬體提出了更多的挑戰,無論是在計算速度,還是在功耗方面,都已經成為嚴重製約 AI 發展的主要瓶頸之一。   如今,隨著用於自動駕駛汽車和語音識別等機器學習方法的出現,這種數據增加的上升趨勢仍將繼續下去。
  • 日本研究人員開發出新型光子加速器,有助於提升運算速度與效率
    導讀據美國物理研究所官網近日報導,日本的一組研究人員開發出一款稱為「PAXEL」的新型處理器。該器件有望繞過摩爾定律,提升運算速度與效率。PAXEL 代表光子加速器,安放在數字計算機前端,優化執行特定的功能,但功耗卻比完全電子化的器件更低。
  • MIT新突破:Nature Photonics揭秘新型光學深度神經網絡系統
    但是,即使對於最強大的計算機,這些系統執行所需要的計算也是十分複雜和巨量的。近日,MIT 的一個研究團隊連同其他一些研究員開發了一種新型計算方式,該方法利用光而不是電,因此該計算方法能大大提高某些深度學習計算的效率和速度。
  • 新光子晶片助力深度學習,神經網絡算法可採用新型光子技術更快實現
    但是這類的系統的計算非常複雜,對機器要求很高,即使對於現有性能最強的計算機也不是件容易的事。然而,來自於MIT的研究團隊和他們的合作者,提出一種新的方法,用光子代替電子,來進行計算。他們表示這種方法將會大大提高計算速度和效率。
  • 用光速加速AI?Nature最新研究,打破你的「次元壁」!
    然而,無論是在計算速度還是功耗方面,現代社會快速增長的數據量都對其電子計算硬體提出了巨大的挑戰。 而這些問題,已經成為人工智慧的主要瓶頸。 而近日,《自然》雜誌上刊登的一篇文章中給出了未來可能的解決方案:
  • Nature:清華團隊提出類腦計算系統新框架,通用人工智慧或將不再科幻
    ,實現了高效、兼容和獨立的進程,通過設置硬體(圖靈完備性)的最低要求,在任何馮·諾依曼處理器(編譯)上將任何高級語言的程序轉換成等效的指令序列變得可行。在該系統層次結構下,各種程序可以用統一的表示來描述,在任何神經形態完備的硬體上都能轉換為等效的可執行程序,從而確保程式語言的可移植性、硬體的完備性和編譯的可行性。
  • 「光子晶片」運算速度無法超越「石墨烯晶片」運算速度,相差巨大
    矽光子晶片技術對於現有晶片技術只是量變而不是質變,這篇文章主要是講光子晶片的提升有多大,再重複一遍是矽光子晶片而不是光量子晶片2015年12月,美國三所大學的研究人員開發出全球首款光子晶片,它可以用光來傳輸數據,速度比過去的晶片大幅提升,能耗也大大減少。
  • 光基處理器晶片推動機器學習
    在當今數字時代,數據流量正以指數級的速度增長。對於人工智慧應用,例如尤其是模式和語音識別、或自動駕駛汽車,對計算能力的需求,通常超出了常規計算機處理器的能力。明斯特大學的研究人員與一個國際團隊合作,開發可以極其高效地應對這些任務的新方法和過程體系結構。
  • 美軍投巨資研製光子晶片 將成戰爭「最強大腦」
    利用光子晶片構建光計算系統,運算速度快、信息失真小、消耗能量低。理論上,光學計算機可以在啟動的一瞬間完成所有信息處理,可對高複雜度、大數據量計算實時並行處理。  光子晶片具有明顯的速度優勢。以光速進行的高效計算,只要在數位訊號處理器上附加一個光學加速器,就可以製成光學數字信息處理器,可使傳統電子晶片的運算速度得到巨大提升。
  • 產生光子以在量子計算系統中進行通信
    圖片來源:Sampson Wilcox麻省理工學院的研究人員使用連接到微波傳輸線的超導量子位,已經證明了量子位可以如何按需產生量子處理器之間進行通信所需的光子或光粒子。這一進步是實現互連的重要一步,互連將使模塊化量子計算系統以比傳統計算機所能達到的指數級速度執行運算。