一篇論文引發的光子AI晶片革命!這次真想要了摩爾定律的命

2021-01-07 騰訊網

AI時代,光子推開計算的另一扇門。

作者 |

心緣

編輯 |

漠影

光子計算時代到來了嗎?幾家中美晶片創企正試圖給出正面的回答。

2020年6月,LightOn發表用光學神經網絡訓練晶片運行AI模型的新論文;7月,曦智科技拿到由和利資本投資的數千萬美元A+輪融資;8月,Lightmatter在晶片頂會HotChips上展示了其光子晶片的架構細節;12月,光子算數宣布其打造的光電混合AI加速計算卡已交予伺服器廠商客戶做測試。

在加速人工智慧(AI)這條賽道上,光子計算晶片這條創新的技術方向正異軍突起。這是一群勇敢的探路人,他們在期待和爭議中前行,一步一個腳印地試圖證明自己判斷方向的正確性。

光子AI晶片距離產業化落地還有多遠?在這一賽道的創業者們,能給計算晶片帶來新的驚喜嗎?

本文福利:在2020年第32屆Hot Chips會議上,孵化於麻省理工學院的初創公司Lightmatter展示了新一代矽光子晶片Lightmatter Mars。推薦Lightmatter在Hot Chips上的演講報告,可在公眾號聊天欄回復關鍵詞【芯東西071】獲取。

01.

一篇頂刊論文引出的新型賽道

隨著摩爾定律滯緩,矽光子技術成為超越摩爾定律的研究方向之一。

2017年,來自英國艾克塞特大學、牛津大學和明斯特大學的研究人員,宣布了其類腦光碟機動晶片研究成果。他們用特殊相變材料和光子集成電路模擬人腦神經突觸,使得這款晶片在測試中的數據傳輸速度達300Gbps,比當時現有標準處理器要快10-50倍,同時功耗大幅降低。

在同年5月的美國麻省理工學院10萬美元創業大賽上,一支來自麻省理工學院(MIT)的團隊憑藉用納米光子晶片執行AI任務,成功斬獲大獎。

▲主創團隊在2017年贏得麻省理工學院10萬美元創業大賽

1個月後,主創團隊的研究成果登上頂級期刊《自然·光子學》的封面,論文描述了一種利用光學幹涉進行神經網絡計算的創新方法。當時,國際著名光學科學家、史丹福大學終身教授David Miller評價稱:「這一系列研究成果極大地推動了集成光學未來取代傳統電子計算晶片的發展。」

這篇光子晶片論文的一作及通訊作者是MIT博士後沈亦晨,二作是尼克·哈裡斯(Nick Harris)。不久之後,這些論文合著者將成為商業上的競爭對手,開啟各自的創業之旅,並分別獲得來自谷歌、百度等科技巨頭的投資。

▲麻省理工學院團隊論文登上《自然·光子學》封面

論文連結:

https://www.nature.com/articles/nphoton.2017.93

光子是當前速度最快的粒子,相較電子,速度更快而功耗極低。此前光學技術通常應用於通信傳輸領域,藉助光的更快速度、更高容量等特點實現數據的遠距離傳輸,但在計算領域進展緩慢。

實際上,光計算的研究歷史並不短暫。在國外,1950年代前後,貝爾實驗室等機構花費大量精力來設計光學計算機部件;在國內,1987年中科院上海光學精密機械研究所王之江院士曾於《中國科學院院刊》上撰文,提出了極具前瞻性的發展光計算技術的建議,並於此後在光學神經學邏輯計算方面開展了大量的工作。

由於光計算的應用場景並不清晰,軟硬體體系也不夠完善,關於如何用光子代替電子晶片執行計算的想法長期停留在研究階段,鮮少在實際應用中發揮廣泛的作用。

直到摩爾定律趨於滯緩,AI的巨輪開始起航。

02.

光子AI晶片的優勢:

速度快、功耗低、擅長並行計算

作為統治計算的一個基準法則,摩爾定律指出,微處理器晶片上的電晶體數每18-24個月翻一番,曾長期作為推動電子設備小型化和網際網路普及的關鍵動力。

但這是晶片製造商及供應商竭力維繫摩爾定律的結果,隨著逼近物理尺寸極限、散熱難題即將成為無法克服的挑戰,以及許多關鍵的計算密集型應用發展提速,人們對摩爾定律的未來產生了更多疑慮,對晶片技術創新的需求也愈發迫切。

2016年,《Nature》在「超越摩爾(More than Moore)」一文中指出,摩爾定律已接近日薄西山,接下來矽晶技術的發展將不再以摩爾定律為中心,造出更好的晶片然後讓應用跟進,而是從應用出發來看需要怎樣的晶片支持,進而容納更多細微複雜的創新方向。

而根據OpenAI發布的分析數據,自2012年以來,AI訓練對算力的需求每3.43個月翻一番,增速明顯快於摩爾定律。

▲自2012年以來算力需求增長超過30萬倍,而如果以摩爾定律的速度只會有 12 倍的增長(來源:OpenAI)

隨著以神經網絡計算為主的AI應用普及,一些研究人員意識到,深度學習可能是數十年來光學計算所等待的「殺手級應用」。

首先,光速快於電子速度,理想狀態下,光子晶片的計算速度能比電子晶片快約1000倍。同時,採用成熟半導體工藝技術的光子晶片,即可達到當下需要的計算能力。

其次光子計算消耗能量少,同等計算速度下,光子晶片的功耗僅為電子晶片的數百分之一,可以緩解AI創新所需的數據中心建設對環境的影響。

▲Lightmatter聯合創始人兼CEO尼克·哈裡斯在2020年Hot Chips上講解光子計算相較電子計算的延時、帶寬、功耗優勢

最後,光計算技術具有並行計算的特點,光波的頻率、波長、偏振態和相位等信息可以代表不同的數據,且光路在交叉傳輸時互不幹擾。這些特性使得光子擅長做並行運算,與多數計算過程花在「矩陣乘法」上的人工神經網絡相契合。

總體而言,光具有高計算速度、低功耗、低時延等特點,且不易受到溫度、電磁場和噪聲變化的影響,在AI應用領域,將光學技術與電子學結合,有望提供比傳統方法更好的速度和能效。

03.

光子計算走向商業化

嗅到AI加速帶來的機會後,來自英、法、美、中的一些創業團隊開始揚帆起航,切入雲端AI計算市場,其中不乏有初創公司得到來自科技巨頭及知名投資者的投資。

2013年成立的英國創企Optalysys,曾於2015年創建一個光計算原型,實現了約320Gflops的處理速度,且能效非常低。去年上半年,Optalysys推出了入門級光學協處理器FT: X2000,計劃出售給包括計算機製造、國防及航空航天領域的部分合作夥伴及早期客戶。

▲Optalysys入門級光學協處理器FT: X2000

初創公司Fathom Computing成立於2014年,其光子原型計算機在2014年時識別手寫數字的準確率還只有30%左右,到2018年時已經超過90%。其創始人Willam Andregg稱,這是機器學習軟體首次使用雷射脈衝電路而非電力進行訓練。不過近兩年,這家創企似乎並未公開更多進展。

2018年,成立兩年、總部位於法國巴黎的創企LightOn宣布,它已經開始在歐洲的數據中心測試自己的光學處理單元(OPU)技術。2020年6月,LightOn發表的新論文顯示,其光學神經網絡訓練晶片在運行基於MNIST手寫數字數據集訓練的模型時,學習率為0.01,測試準確率達到95.8%;同一算法在GPU上的學習率為0.001、準確率達97.6%。而該光學晶片的功耗效率要比GPU高出一個數量級。

論文連結:https://arxiv.org/pdf/2006.01475.pdf

當然,名氣最盛的光子晶片創業者,當屬曾在《自然·光子學》上發表封面文章、來自麻省理工學院的沈亦晨和尼克·哈裡斯,兩人均在2017年成立光子晶片公司,都選擇Mach-Zehnder幹涉儀光開關陣列(MZI)作為基礎計算單元,但具體的MZI結構及陣列架構有所不同。

沈亦晨在美國波士頓創辦Lightelligence,在中國上海成立曦智科技,發展了跨國多元團隊,是目前全球融資額最高的光子計算初創公司。

▲曦智科技創始團隊

曦智科技在2018年獲得由百度風投和美國半導體高管財團領投的逾1000萬美元種子輪融資;2020年4月完成由經緯中國和中金資本旗下中金矽谷基金領投、百度風投繼續追加投資的2600萬美元A輪融資;2020年7月完成由和利資本投資的數千萬美元A+輪融資。

2019年4月,曦智科技發布全球首款光子晶片原型板卡,在運行TensorFlow處理MNIST數據集的測試中取得百倍以上的速度提升,準確率接近電子晶片(97%以上),而完成矩陣乘法所用的時間不到最先進電子晶片的1/100。曦智科技計劃從2021年起為AI雲計算帶來高效的量產產品。

▲曦智科技開發的全球第一款光子晶片原型板卡

尼克·哈裡斯在波士頓創辦的Lightmatter公司,則拿到了由谷歌風投、星火資本、經緯創投等投資的3300萬美元資金。

▲Lightmatter聯合創始人Darius Bunandar(左)、Nicholas Harris(中)、 Thomas Graham(右)

在2020年的晶片頂會Hot Chips上,Lightmatter展示了其用於AI推理加速的測試晶片Mars,該晶片利用矽光電學和MEMS技術,通過由毫瓦級雷射光源,為用光執行矩陣向量乘法提供動力。相較傳統電子晶片,其計算速度提升數個量級。

Lightmatter預計在2021年秋季推出這款測試晶片的首款商用產品,並為之打造了必要的軟體工具鏈。哈裡斯稱其量產晶片在BERT、Resnet-50推理等工作負載上,能效將是AI晶片領導者NVIDIA旗艦晶片A100的20倍、吞吐量將是A100的5倍。

▲Lightmatter測試晶片Mars

看到《自然·光子學》上MIT團隊刊發的論文後,正在研究光電子的中國北京交通大學2014級博士生白冰獲得了新的啟發,他與十餘位來自清華、北大等北京8所高校的博士生們一起,在2017年在北京創立光子算數團隊,開始推進光子AI晶片商業化。

▲光子算數創始人兼CEO白冰

光子算數於2018年9月獲得臻雲創投、英諾天使基金投資的天使輪融資、2019年獲得由水木清華校友基金、常見投資、英諾天使基金、臻雲創投等投資的A輪融資。

目前光子算數已研發可編程光子陣列晶片FPPGA(Field Programmable Photonic Gate Arrays),並基於此與北京高校一起打造了面向伺服器的光電混合AI加速計算卡,能完成包括機器學習推理、時間序列分析在內的一些定製化加速任務。

其計算卡已於2020年交由伺服器廠商客戶進行測試,在不到70W的運行功耗下,能做三四十路1080P視頻同步處理,混合精度下峰值算力接近20TOPS,光部分為低精度,電部分為高精度。

▲光子算數的光電混合AI加速計算伺服器應用測試

從美國普林斯頓大學脫胎而出的美國光子AI晶片創企Luminous Computing成立相對晚一些。

該公司由首席策略官Michael Gao、CEO Marcus Gomez和CTO Mitchell Nahmias在2018年聯合創立,於2019年籌得來自微軟創始人比爾·蓋茨、Uber執行長Dara Khosrowshahi等知名投資者的900萬美元種子輪融資,2020年又籌得由Helios Capital領投的900萬美元A輪融資。

Nahmias在普林斯頓PhD期間的主要研究方向即是光子AI晶片。與MIT團隊不同,他們採用的並非MZI,而是被稱為Broadcast and Weight的方案,相較MZI型方案多了光電轉換過程,且對相位不敏感。Nahmias稱其光子集成電路可以取代3000塊TPU板,更加節省能耗,且能突破現有AI晶片傳輸數據的瓶頸。

▲Broadcast and Weight方案的原理框架

這些創業團隊的硬體均被設計為可以插入標準伺服器和工作站中,可實現即插即用,並能與主流AI軟體配合使用,以滿足商用需求。

04.

結語:光子計算踏上AI計算新徵程

訓練AI模型需要超高算力的計算機晶片,這使得晶片巨頭、初創公司之間展開一場圍繞AI計算的全新角逐。

如今光子計算仍處早期階段,站在這一全新計算賽道上的玩家們,幾乎沒有前路可以借鑑,他們正頂著技術挑戰、落地風險等方面的壓力,試圖構建起光子計算生態,探索著改變計算的可能。

對於投資者來說,新興計算技術仍充滿風險。但隨著世界對多元計算方式的需求增加,以光子計算、神經擬態晶片、量子晶片等為代表的新興計算方法,正被寄予打破標準計算系統制約的期待。

這是件令人期待的事情,光學計算已經在商業化道路上邁出了重要的一步,而一旦有初創公司解決工程化挑戰、取得落地商用的成功,光學計算革命的大門或將由此開啟。

本文福利:在2020年第32屆Hot Chips會議上,孵化於麻省理工學院的初創公司Lightmatter展示了新一代矽光子晶片Lightmatter Mars。推薦Lightmatter在Hot Chips上的演講報告,可在公眾號聊天欄回復關鍵詞【芯東西071】獲取。

參考資料:《光子晶片研究進展及展望》世界科學;《MIT初創公司發布全球首個光子AI晶片原型!獨立光學計算硬體,龐大系統成功集成至常規板卡|獨家專訪》DeepTech深科技;初創《光子AI晶片新玩家——Luminous Computing》光學小豆芽;《Alphabet invests in a start-up using beams of light on chips for super-fast A.I.》CNBC

資料推薦

社群招募

晶片半導體技術社群」正在招募!群內有:

行業分析解讀、報告資料分享、業內大V交流

更多晶片半導體熱文

請在芯東西公眾號對話頁回復「晶片」查看。

1、產品與技術:

《光刻機之戰》

《光刻機詳解:「恐怖」的光源系統》

《華為晶片28年發家史》

《華為晶片大閱兵》

2、重要歷史回顧

《中芯國際:無奈的內訌》

《EDA戰爭:一個矽谷叢林的故事》

《阿斯麥封神記》

相關焦點

  • Nature連發兩篇光子AI晶片論文!光子計算時代已至?
    傳統電子計算方法逐漸走向性能極限後,近幾年,關於用光學晶片加速AI的研究逐漸興起。這不,2021年剛開年,頂級科學期刊《Nature》上就在一天之內連發兩篇利用光學特性加速AI處理的光子晶片論文。論文連結:https://doi.org/10.1038/s41586-020-03063-0其中一篇論文題目為《用於光學神經網絡的11 TOPS光子卷積加速器(11 TOPS photonic convolutional accelerator for optical neural networks)》,論文主要作者有Xingyuan Xu、Mengxi Tan等人,來自澳大利亞斯威本科技大學
  • 「摩爾定律」走向終結,光子晶片將成為電子行業的未來?
    「預計晶片中集成電晶體的數量 24 個月會提高一倍。」——相信大家對英特爾聯合創始人戈登•摩爾提出的「摩爾定律」並不陌生。在過去的四十年裡,IT 行業一直受這一定律的驅動。不過近年來隨著傳統電子晶片發展速度的放緩,「摩爾定律」正逐漸走向歷史。未來,基於光子技術的新型晶片,或將打破電路元件的限制,建造出運算速度更快的計算機。
  • 傳說中的光子計算機將直接擊潰摩爾定律
    在過去幾十年中,計算機處理器的發展一直都遵循摩爾定律,這個由戈登·摩爾提出的定律一直都推進著電子行業的發展。但是近年來不斷的傳出摩爾定律即將失效的聲音,在今年的GTC上,老黃在開場後直接表示「摩爾定律」已經失效,「設計人員無法再創造出以實現更高指令級並行性的CPU架構」「電晶體數每年增長50%,但CPU的性能每年僅增長10%」。
  • 淺析後摩爾時代的AI革命
    淺析後摩爾時代的AI革命 Wilde 發表於 2020-12-04 10:44:00 機器學習已然無處不在。
  • 摩爾定律一
    1965年時任仙童半導體公司研究開發實驗室主任的摩爾應邀為《電子學》雜誌35周年專刊寫了一篇觀察評論報告,題目是:「讓集成電路填滿更多的元件」。在摩爾開始繪製數據時,發現了一個驚人的趨勢:每個新晶片大體上包含其前任兩倍的容量,每個晶片的產生都是在前一個晶片產生後的18-24個月內。如果這個趨勢繼續的話,計算能力相對於時間周期將呈指數式的上升。
  • 電子晶片逼近1nm極限,摩爾定律失效,頂上來的將是光電晶片
    隨著摩爾定律逐步逼近物理規律極限,微電子技術集成電路發展瓶頸已經出現,光電晶片成為下一代晶片技術發展的方向之一。該晶片可以存儲光並修改光的頻率,有望應用於光量子信息處理、光信號處理和微波光子學。研究人員表示,許多光量子和經典光學應用都需要改變光的頻率,而該晶片首次利用微波以可編程的方式實現對光頻率的修改。2019年6月,美國麻省理工學院的研究人員開發出一種新型光子晶片。該晶片不僅體積更小,具有更低的功耗,且處理大規模神經網絡的效率比現有計算機高出數百萬倍。
  • 電子晶片逼近1nm極限,摩爾定律失效,頂上來的將是光電晶片
    隨著摩爾定律利用光信號進行數據傳輸、處理和存儲的光電晶片有望成為5G和人工智慧時代的關鍵基礎設施,並帶動整個信息技術產業進入「從電到光」的轉換過程。1、美國光電晶片研發屢獲突破,技術水平處於世界領先地位2019年1月,美國哈佛大學的研究人員開發出新型光子集成晶片。該晶片可以存儲光並修改光的頻率,有望應用於光量子信息處理、光信號處理和微波光子學。
  • 「芯觀點」後摩爾時代的AI革命:算力需求激增,催生晶片創新
    後摩爾時代的AI革命顯然需要新的顛覆——從計算架構開始,做算法、硬體和軟體的共同優化變得尤為關鍵。對算力需求的激增,也進一步催生AI專用晶片和專用設備的蓬勃發展,並促使晶片層面的多種創新。張童皓也觀察到了晶片技術和機器學習之前的相互影響。
  • 摩爾定律將死,晶片行業將掀起新一輪革命,誰將成為新時代領航者
    摩爾定律的意思就是隨著電晶體特徵尺寸接近絕對極限,我們可以利用越來越小的晶片實現越來越多的功能。 處理器速度變得越來越快,我們可以在單片IC上放入更多特性和更多存儲器。到了1974年,IBM工程師羅伯特·登納德對摩爾定律進行了補充:縮小晶片元件的尺寸能夠使晶片的速度更快、功耗更低、價格更便宜。
  • 英偉達為何想要收購Arm?黃氏定律正取代摩爾定律
    (Moore’s Law)正在全面失效,但以英偉達執行長黃仁勳(Jensen Huang)的名字命名的新定律——黃氏定律(Huang『s Law)似乎正在取而代之,而這也正是英偉達收購英國晶片設計巨頭Arm的重要原因。
  • 再次拯救摩爾定律:一文瞭然GAA晶片技術
    最好的例子就是晶片巨頭英特爾在 14nm 節點長達 5 年的停滯,一度讓 「摩爾定律已死」的言論甚囂塵上。很顯然,漏電不是個好事情,它會導致晶片發熱量急劇上升。  所以半導體工藝進化之路在 20nm 左右曾一度面臨停滯,摩爾定律遭受威脅。  怎麼辦呢?其實只要柵極和源極、漏極之間的接觸面積足夠大,就能控制住電流。這個接觸面的寬度不能增加,那就只能增加長度了。
  • 摩爾定律:我這一輩子,見證了電子產業的崛起
    有了這些前期知識的積累,摩爾在 1965 年發表的一篇論文中做出了大膽的結論:集成電路代表了電子產業未來發展方向。這聲明在今天看來當然是不言自明的,但是在當時那個年代卻引起了爭議。很多人都質疑摩爾的觀點,認為集成電路不過是電子產業中的一個小小分支。
  • AI計算量每年增長10倍,摩爾定律也頂不住|OpenAI最新報告
    英偉達的黃仁勳一直在強調摩爾定律已死,就是沒死也頂不住如此爆炸式的算力需求啊。至於為何發布AI計算量報告?OpenAI說,是為了用計算量這種可以簡單量化的指標來衡量AI的發展進程,另外兩個因素算法創新和數據難以估計。
  • 光子晶片研究進展及展望︱大家
    ,這一舉措對整個電子工業界產生了深遠的影響,微處理器晶片所帶來的計算機和網際網路革命改變了整個世界。  面向未來的計算系統 ,光計算具有天然優勢  2016年,《自然》雜誌社論「超越摩爾」中明確指出電子晶片難以為繼。2019年,美國普林斯頓大學普魯尼 (Prucnal) 等人撰文指出人工智慧大數據時代對算力的需求每三個半月翻一番,遠超摩爾定律所預測的算力供給量,即每18~24個月翻一番。
  • 為摩爾定律續命? 自旋電子技術暫難當大任
    該定律指出,集成電路上可容納的元器件數目每18個月約翻1倍。  在過去的半個多世紀裡,摩爾定律為半導體工業的發展節奏設定了基本步調。自摩爾定律提出以來,不論是從單個晶片電晶體數目角度,還是從微處理器晶片、半導體存儲器以及系統軟體角度來考察,摩爾定律的預言與現實都驚人地吻合。可晶片上電晶體的尺寸不可能無限制地縮小下去,晶片單位面積上可集成的元器件數目會達到極限。
  • 摩爾定律失效了?為何英特爾困於7納米晶片,而臺積電卻能突破
    摩爾定律摩爾定律是由英特爾公司創始人之一戈登·摩爾提出的經驗之談,被譽為計算機第一定律!其核心內容是:集成電路上可容納的電晶體數量,大約每隔24個月便會增加一倍。換而言之,每隔兩年,處理器的性能就會提高一倍!
  • 從8年酷睿進化史看摩爾定律發展之殤
    02摩爾定律真的是定律嗎?戈登·摩爾預測到1975年,晶片中將包含65000個電晶體  準確的說,摩爾定律並非是一條嚴格意義上的物理定律換為我們更為熟知的一種說法是,晶片中的電晶體數量每年增加一倍。摩爾在1975年將每晶片電晶體數量的增長斜率做了修正  另一個重要信息是,摩爾定律並非是一成不變的,而是根據時代環境的不同有所調整。
  • 比摩爾定律快得多:為什麼要將AI算力擴展至ExaFLOPs百億億次量級?
    被譽為英國半導體之父,同時也是Arm聯合創始人的Hermann Hauser先前曾經這樣評價過Graphcore:「這在計算機歷史上只發生過三次,第一次是70年代的CPU,第二次是90年代的GPU,而Graphcore就是第三次革命。他們的晶片是這個世界偉大新架構的一種。」
  • 為何說7nm是矽材料晶片的物理極限?1nm真的能救摩爾定律嗎?
    而近年來,晶片製造技術進步放慢,摩爾定律出現失效的客觀現象,對於中國半導體產業追趕西方來說是一大利好。Bazednc摩爾定律失效,一方面既有技術因素——先進光刻機、刻蝕機等設備以及先進晶片製造技術研發技術難度大、資金要求高......另一方面也有商業上的因素。
  • 科學家首次將光子限制在了原子直徑的範圍內!或引發科技革命
    科技就是一個不斷在創新的過程,只有新的發明才能歷史的前進的腳步,否則只會遲遲停在遠處,早在十幾年前,科學家們就從一些物質中分離出來了石墨烯這種材料,瞬間就風靡了整個世界,引發了所有的科學家對石墨烯的運用和研究,而近期也有科學家在想辦法通過同樣的分離原理把光子鎖在原子的內部,這一想法如若實現了