新光子晶片助力深度學習,神經網絡算法可採用新型光子技術更快實現

2020-12-04 DeepTech深科技

基於人工神經網絡算法的計算機深度學習系統已成為目前計算機領域研究的前沿熱點,它的原理是使人工神經網絡算法模仿人腦從實踐中學習的方式進行學習。它除了可以用來實現面部和聲音識別以外,還可通過搜尋大量的醫學數據來進行醫學診斷,或者通過搜尋化學方程式來尋找潛在的新藥合成方式。

但是這類的系統的計算非常複雜,對機器要求很高,即使對於現有性能最強的計算機也不是件容易的事。

然而,來自於MIT的研究團隊和他們的合作者,提出一種新的方法,用光子代替電子,來進行計算。他們表示這種方法將會大大提高計算速度和效率。他們的實驗結果今天發表在著名期刊《自然.光子學》(Nature Photonics)上,論文作者包括MIT博士後沈亦晨,研究生Nicholas Harris, Marin Soljai和Dirk Englund教授以及另外8個合作研究者。

圖丨可編程納米光子處理器概念圖

事實上,很多研究者長期以來都在推廣基於光子的計算機。但Soljai表示,「他們太過於樂觀,結果往往事與願違」。儘管很多基於光子計算機的應用都是不切實際的,但基於光子的神經網絡系統「可能對於某些應用的深度學習算法是可行的」,他說道。

Soljai的言論並非毫無道理。眾所周知,在人工智慧算法中,包含有多次矩陣相乘的運算,基於傳統計算機架構的CPU和GPU在處理這些運算的時候非常吃力,計算效率較低。針對這一問題,Soljai和他的研究團隊經過多年的研究提出了這種基於光學的計算方法。「這種光學晶片的優點在於一但被設置好,那麼它開展矩陣乘法運算所消耗的能量,理論上說可以為0。」Soljai說,「雖然目前我們還沒研製出整個系統,但已經實現了核心部件的驗證」

圖丨Marin Soljai

Soljai打比方說,即使是一個最普通的眼鏡鏡片也會對穿過它的光波有一個複雜的運算:傅立葉變換。新的光子晶片所執行的運算雖然比傅立葉變換簡單的多,但基本原理類似。這種晶片使用多光束幹涉技術,其幹涉條紋信息反映了所需計算的結果。研究者稱這種晶片為可編程納米光子處理器。

沈亦晨表示,實驗結果顯示這種光子晶片架構理論上可以以更快的速度、更小的功耗來運行人工智慧算法:進行相同的一次運算所需的能量損耗甚至低於傳統晶片的千分之一。「利用光子來做矩陣乘法運算的內秉屬性是功耗降低和速度提升的主要原因,因為密集的矩陣乘法運算是人工智慧算法中最耗時間和功率的。」

圖丨沈亦晨

這種納米光子處理器由Englund實驗室的Harris等人研發。它基於一系列相互連接的光波導對光子進行導引,這些光波導的連接可根據需要進行設定和編程,以實現特定的運算目的。「你可以編程實現任一矩陣操作」 Harris說。團隊的終極計劃是利用多層交錯的裝置實現非線性激活函數操作,就像大腦中神經元的作用一樣。

為了驗證這一概念,團隊利用這個可編程納米光子處理器去實現辨識四個基本元音的神經網絡算法。結果發現,儘管僅僅使用了一個初級的系統,他們也獲得了77%的準確率,而傳統系統的準確率為90%。Soljai表示,擴展系統以獲得更高的準確度「不存在障礙」。

Englund補充道,這個可編程納米光字處理器也可有其他方面的用途,如數據傳輸過程中的信號處理。「高速模擬信號處理是此類處理器可以完成的」,而且要快於那些基於模擬——數字轉換的方法,因為光本身就是一種模擬的介質。「這種方法可以直接在模擬域進行運算」他說到。

與此同時,團隊也表示還需要大量的時間和努力來使得這個系統可以實際應用。而且,一旦這種系統擴展成功並且完全的發揮其作用,它可以有非常多的應用,比如數據中心或安全系統。這個系統還可以用於無人駕駛汽車或無人機,Harris表示,「在任何你需要進行大量運算但卻受到時間和功率限制的情況下,它都可以派上用場。」

相關焦點

  • MIT新突破:Nature Photonics揭秘新型光學深度神經網絡系統
    作者:David Chandler機器之心編譯參與:吳攀、黃小天、蔣思源儘管科學家和研究者一直在探索新型的計算形式,但目前電子計算仍然是絕對的主流。隨著以深度學習為代表的人工智慧技術的興起,人們也開始關注如何開發出能更有效、更高速地執行神經網絡運算的計算硬體。
  • 光子晶片研究進展及展望︱大家
    ,光計算技術高速和低功耗的特點越來越受到人們的重視;  二是光計算技術的並行性運算特點,以及光學神經網絡等算法和硬體架構的發展,為圖像識別、語音識別、虛擬實境等人工智慧技術對算力的需求提供了最有潛力的解決方案。
  • MIT研發光學深度神經網絡:幾乎不需能耗
    深度學習計算機系統是基於人工神經網絡(Artificial Neural Networks)模仿人腦學習方法的一種系統,現已成為計算機科學領域的熱門話題。深度學習不僅助力了面部和聲音識別軟體的發展,還為醫療領域帶去了大量數據輔助診斷。但這些系統需要執行的計算是非常複雜和嚴格的,即使是對配置最強的計算機來說,計算仍然是個不小的挑戰。目前,研發人員已經研發出一種新型的計算方式——他們用光子代替電子作為信息輸送介質,極大提高了某些深度學習中計算的速度和效率。
  • 前沿播報 | 新全光二極體、新型自旋閥結構、新型高效節能深度學習神經網絡、「神經網絡核磁共振成像」…
    新二極體能被用於微型光子電路中,有望為微納光子學晶片提供廉價高效的光二極體,從而對光子晶片和光子通信等領域產生重要影響。新二極體僅能在一個方向上傳輸光,且可集成到微納光子電路中,因此,克服了二極體需要大塊磁光晶體這一限制。
  • 光子晶片:一場發生在MIT校友之間的競賽
    可如今,「摩爾定律」已死的聲音不絕於耳,加之人工智慧對計算能力提出了差異化的要求。所以,近年來,電氣工程師和計算機科學家一直在努力想辦法實現更快、更有效地計算,包括GPU、ASIC和FPGA等方案也越來越火爆。
  • 深度學習「賦能」光子結構設計
    而採用深度學習方法來設計光子學結構則是一種全新的設計理念。這種方法使用數據驅動的建模思想,不引入人為規則和設定,而是通過學習大量的數據,得到光學特性與設計參數之間的對應規律。 這一研究領域已經吸引了大量行業內外的關注。
  • 速度提升百倍:顛覆性的光子計算來了-科技前沿,光子計算,晶片,大...
    由於光和透鏡的交互作用過程本身就是一種複雜的計算——傅立葉變換,利用這個原理,使用多光束幹涉技術,可以讓幹涉結果反應想要的計算結果。2016年6月,麻省理工學院研究團隊研發出針對深度學習的可編程納米光子處理器在arXiv提出了一份論文,該論文的第一作者及通訊作者正是沈亦晨。該論文最終在2017年發表在《自然-光子學》雜誌上。
  • 光子晶片的技術原理以及應用前景
    因此,隨著集成光子技術的日益成熟,在晶片表面構建更大、更複雜的光子電路的可能性越來越大。光子晶片與電子晶片相似之處在於,都是在晶片表面實現的。 但兩者的不同之處在於,光子晶片主要通過使用晶片上的光波導、光束耦合器、電光調製器、光電探測器和雷射器等儀器來操作光信號,而不是電信號。電子晶片擅長數字計算,而光子晶片則擅長傳輸和處理模擬信息。
  • 2nm技術的晶片開始沒落,下一代信息科技基石一定是光子晶片
    1.臺積電6納米半導體製程技術臺積電6納米製程採用極紫外線光刻技術,與7納米製程相比,可將電晶體密度提高18%,而且其設計規則與7納米製程完全兼容,降低了升級成本。臺積電錶示,6納米製程技術應用於中高端行動網路、人工智慧、5G通信、高性能計算等領域半導體晶片的製造。
  • 光子晶片研究進展及展望:面向未來的計算系統,光計算具有天然優勢
    2018年9月,加州大學洛杉磯分校奧茨坎(Ozcan)等人採用空間光調製器和三維列印的介質材料構建多層感知器,實現了衍射光學深度神經網絡光子晶片,他們設計出3D列印的固態衍射光學元件,通過控制不同層之間傳播的衍射光來實現特定權重互連。
  • 速度提升百倍,顛覆大數據處理的光子計算晶片來了?
    2016年6月,麻省理工學院研究團隊研發出針對深度學習的可編程納米光子處理器在arXiv提出了一份論文,該論文的第一作者及通訊作者正是沈亦晨。該論文最終在2017年發表在《自然-光子學》雜誌上。於是,2016年,沈亦晨與麻省理工學院的幾個博士好友,共同創立了全球首家光子計算公司。他們的目標是利用已經擁有的大量自主智慧財產權以及包括集成光學器件設計、集成光電系統和深度學習算法在內的核心技術推動光子計算晶片的商業化落地。成立之初,曦智科技團隊就獲得了資本的認可,得到了頂級風險投資機構千萬美元級別的首輪融資。
  • 光子計算元年?全球最高累計融資額光子計算創業公司出爐,中國科學家團隊領銜
    利用矽光子來做數據傳輸和矩陣乘法運算,在功耗降低和速度提升上前景可期,很可能帶來光子計算有史以來最大的機會。應用在雲計算環境中,它可以加速深度學習的訓練和推理,同時邊緣設備也能受惠於這一技術,例如對功耗更敏感的無人機、傳感器等設備。
  • 中科創星投資全球首家光子晶片公司,「曦智科技」完成2600萬美元A...
    光子晶片正是解決集成電路困境的下一代革命性技術,未來光子計算將逐步取代集成電路在計算中的主導地位。目前AI晶片在計算晶片中的佔比越來越大,AI晶片也遇到類似的問題,在人工智慧的深度學習算法中,矩陣運算佔到計算的80%-90%,而光子晶片在處理矩陣運算時有高速、並行性、高帶寬與低功耗的天然優勢。
  • 曦智科技沈亦晨:光子晶片加速智能算法和智能計算
    以市場上用得最多的旗艦產品為例,其中之一是 2015 年的英偉達 GPU 晶片,整個晶片從面積上來看大概有 600 平方毫米,能耗大概是 100W 左右。此外,2020 年剛推出的英偉達深度神經網絡訓練和推理晶片 A100,它的面積大約是 800 多平方毫米,這並不是說他只想做這麼大,他其實可以做更大。
  • KVH高精度光纖陀螺儀產品採用光子晶片技術
    蓋世汽車訊 據外媒報導,KVH Industries於近日宣布,公司將光子晶片(photonic chip)技術整合到高精度光纖陀螺儀(fiber optic gyro)產品中,並於去年12月末向選定用戶交付新款光子陀螺儀慣性測量裝置(Photonic Gyro IMU)的原型產品
  • MIT初創公司發布全球首個光子AI晶片原型!丨獨家專訪
    近幾年,電子計算愈發受制於摩爾定律,信息技術載體的存儲密度與運算速度的提升愈發力不從心,讓一部分人將目光從「電」轉向了速度更快、能耗更低的「光」。(來源:麻省理工科技評論)尤其是基於人工神經網絡算法的深度學習系統的流行。
  • 一篇論文引發的光子AI晶片革命!這次真想要了摩爾定律的命
    2020年6月,LightOn發表用光學神經網絡訓練晶片運行AI模型的新論文;7月,曦智科技拿到由和利資本投資的數千萬美元A+輪融資;8月,Lightmatter在晶片頂會HotChips上展示了其光子晶片的架構細節;12月,光子算數宣布其打造的光電混合AI加速計算卡已交予伺服器廠商客戶做測試。
  • 中國科學家研製出新型可擴展光子計算機
    2月2日,記者從上海交通大學集成量子信息技術研究中心獲悉,該中心金賢敏團隊研製出一種結合集成晶片、光子概念和非馮諾依曼計算架構的光子計算機,新計算機不僅在解決某些難題方面擁有超越經典電子計算機的潛力,且物理尺度可擴展。該研究提供了超越經典計算機計算能力新思路,預示光子計算機未來可期。
  • 新技術實現逐個產生相同光子
    此為光子示意圖。下一代駕馭量子物理技術的設備,將能提供比現代網際網路更安全、更快、更高性能的信息分享體驗。光子是目前科學家所知的量子信息的最佳載體,能夠完成長距離傳輸而不會損失記憶或相干性。所以目前大部分設計都使用單個光子加密信息,通過這些光子在量子網絡間、或在量子晶片之間傳遞信息。
  • 《Nature》綜述:光子晶片未來可期
    隨著集成光子技術的日益成熟,在晶片表面構建更大、更複雜的光子電路成為可能。與電子集成電路一樣,光子集成電路(photonic integrated circuits)是在晶片表面實現的。但是與電子集成電路不通的是,光子集成電路主要通過使用晶片上的光波導、光束耦合器、電光調製器、光電探測器和雷射器等儀器來操作光信號,而不是電信號。電子集成電路擅長數字計算,而光子集成電路則擅長傳輸和處理模擬信息。