李沐:一起「剁手」之GPU購買指南

2021-01-16 將門創投


深度學習訓練通常需要大量的計算資源。GPU目前是深度學習最常使用的計算加速硬體。相對於CPU來說,GPU更便宜(達到同樣的計算能力GPU一般便宜10倍),而且計算更加密集(一臺伺服器可以搭配8塊或者16塊GPU)。因此GPU數量通常是衡量深度學習計算能力的一個標準,同時Nvidia的創始人Jensen Huang也被人稱深度學習教父。


 Nvidia CEO黃教主和他的戰術核武器

 

本文我們簡要介紹GPU的購買須知。這裡主要針對個人用戶購買一兩臺自用的GPU伺服器。而不是針對需要購買:


選擇GPU


目前獨立GPU主要有AMD和Nvidia兩家廠商。其中Nvidia由於深度學習布局較早,深度學習框架支持更好,因此目前主要會選擇Nvidia的卡。

 

Nvidia卡有面向個人用戶(例如GTX系列)和企業用戶(例如Tesla系列)兩種。企業用戶卡通常使用被動散熱和增加了內存校驗從而更加適合數據中心。但計算能力上兩者相當。企業卡通常要貴上10倍,因此個人用戶通常選用GTX系列。

 

Nvidia一般每一兩年會更新一次大版本,例如目前最新的是1000系列。每個系列裡面會有數個不同型號,對應不同的性能。

 

GPU的性能主要由下面三個主要參數構成:



對於大部分用戶來說,只要考慮計算能力就行了。內存不要太小就好,例如不要小於4GB。如果顯卡同時要用來顯示圖形界面,那麼推薦6G內存。內存帶寬可以讓廠家來糾結。

 

下圖畫了900和1000系列裡各個卡的32位浮點計算能力和價格的對比(價格是wikipedia的推薦價格,真實價格通常會有浮動)。



我們可以讀出兩點信息:

在同一個系列裡面,通常價格和性能成正比

1000系列性價比900高2倍左右。


如果大家繼續比較GTX前面幾代,也發現規律是類似的。根據這個我們推薦: 


整機配置


如果主要是用GPU來做計算,或者說主要是做深度學習訓練,不需要購買高端的CPU。可以將主要預算花費在GPU上。所以整機配置可以參考網上推薦的中高檔就好。

 

不過由於GPU的功耗,散熱和體積,需要一些額外考慮。

 

機箱體積


GPU尺寸較大,通常不考慮太小的機箱。而且機箱自帶的風扇要好。(下圖裡我們曾嘗試在一個中等機箱裡塞滿4卡導致散熱不好燒了2塊GPU。)



電源


購買GPU時需要查下GPU的功耗,50w到300w不等。因此買電源時需要功率足夠的。(我們倒是一開始就考慮了這個,但忘了不過載機房供電。下面是5臺機器滿負荷運行時燒掉了一個30A的電源接口。)




主板的PCIe卡槽


推薦使用PCIe 3.0 16x來保證足夠的GPU到主內存帶寬。如果是多卡的話,要仔細看主板說明,保證多卡一起使用時仍然是16x帶寬。(有些主板插4卡時會降到8x甚至4x)


對於更具體的配置可以參考我們走過的一些彎路>>http://mli.github.io/gpu/2016/01/17/build-gpu-clusters/

歡迎來討論區交流大家的機器配置>>https://discuss.gluon.ai/t/topic/1177


你可能還想看:

李沐:來一起動手學深度學習吧

回顧 | 跟李沐一起動手學深度學習第一課:從上手到多類分類

回顧 | 跟李沐一起動手學深度學習第二課:過擬合、多層感知機、GPU和卷積神經網絡 


-END-


   

 

將門創投

讓創新獲得認可!

微信:thejiangmen

service@thejiangmen.com

相關焦點

  • 實戰入門深度學習,李沐中文新書贈送
    2018 年底,機器之心介紹了李沐等人開源的中文書籍《動手學深度學習》。
  • 李沐《動手學深度學習》重磅更新!新增PyTorch和TensorFlow實現,還有中文版
    李沐老師的《動手學深度學習》已經有Pytorch和TensorFlow的實現了,並且有了中文版。網址:http://d2l.ai/簡介李沐老師的《動手學深度學習》自一年前發布以來廣受歡迎,即使所有內容都提供了免費的網頁和PDF版,仍然有大量讀者購買實體書。實體版曾一度在計算機類新書裡排名前三。
  • 從ACM班、百度到亞馬遜,深度學習大牛李沐的開掛人生
    值得注意的是,這個由 DMLC(Distributed Machine Learning Community)打造的深度學習框架,創建者都是中國人,以陳天奇、李沐、解浚源等為代表。現在,包括 AWS 在內的很多企業都將 MXNet 作為主流支持框架。作為深度學習「大神」,李沐的開掛人生經歷並不被所有人熟知。為了加深大家對李沐的了解,我們對其學習、職業和研究生涯做了一個簡單的總結。
  • 臺灣化妝品入門級剁手指南
    不過對於廣大女性來說,去臺灣還有一件事是重中之重,那就是在化妝品的海洋中任性剁手。相較於大陸來說,臺灣化妝品實惠的價格使其成為自用囤貨和饋贈親朋的不二之選。話不多說,下面就為大家奉上一份新鮮出爐的臺灣化妝品入門級剁手指南。臺北必逛六大藥妝商店臺灣的藥妝產業十分發達,從本土藥妝到日本藥妝,再到各個國家和地區的知名藥妝品牌,一應俱全。
  • 李沐調研長沙計量工作
    4月13日,省市場監管局副局長李沐帶領省局計量處、省計量院負責人一行赴長沙市市場監管局,調研近年來計量工作開展情況、今年的重點工作和「5·20世界計量日」宣傳活動和集貿市場專項整治工作。李沐指出,計量工作是事關民生和經濟發展的重要基礎保障工作,要進步一步提高對計量工作重要性的認識,加強人員培訓和基礎設施建設。當前,尤其要抓好市場監管總局、省市場監管局支持企業復工復產各項措施的落實,深入推進「計量服務中小企業行」活動,為復工復產提供計量技術支撐。要注重監管方式方法,既要加強對違法案件的查處,又要注重服務企業服務民生。
  • | 李沐技術分享會
    這是眾多崇敬李沐教授的人送給他的稱呼之一。  雖說,科技大神千千萬,「沐神」確是獨一份。之前知乎上出現一個話題「孩子今年開學上小學五年級了,現在報課外班學 Tensorflow 還來得及嗎?難道非要讓李沐教授親自跟大家嘮嘮,才能給你點勇氣?好的,這次他來了!
  • 李沐被網友搭訕出道,一夕爆紅,為拍戲練習抽菸和講髒話
    23歲新銳演員李沐在華語影集《誰是被害者》飾演張孝全的女兒江曉孟,一夕爆紅,被譽為今年戲劇圈最強怪物新人!不少觀眾看完看完《誰是被害者》對她贊許有加,紛紛驚呼:江曉孟是哪裡冒出來的演員?其實李沐入行已經4年,在採訪時她回憶自己的出道經歷,在19歲時,經紀人在自己社交媒體搭訕自己,詢問是否有興趣拍戲,於是大家約出來見面,李沐的媽媽也一起陪同,經紀人覺得李沐長得不錯,結果媽媽與經紀人一拍即合併爽快回應:「好啊,就拜託你照顧嘍。」
  • 李沐:小學五年級開始學TensorFlow太晚了!(一本正經曬娃帖)
    作者:李沐編輯:大明【新智元導讀】小學五年級報課外班學TensorFlow怎麼樣?答案是:有點晚了!這是卡內基梅隆大學博士、亞馬遜AWS首席科學家李沐給出的答案。工作閒暇之餘,這位網友口中的「沐神」也忍不住在知乎上皮了一把,順便當了一回 「曬娃狂魔」。
  • 我們跑到PaloAlto,和MXNet作者李沐聊了兩小時|AAAI2017見聞
    從百度少帥到 CMU 博士再到 MXNet, 李沐的履歷儼然自帶距離感。但當穿著耐克灰色套頭衫和牛仔褲的李沐坐在我們面前侃侃而談時,AI 君在會面前的擔心一掃而光。嚴格來說這並不是一次採訪,更像是朋友間的閒聊。經李沐老師的同意,我們整理出了下面這篇文章,其中涉及的內容僅代表他的個人觀點,特此聲明。
  • 李沐團隊半年離開六人,MxNet是否英雄落幕?
    2、之前我們跟工程組一起做了很多純工程項目。在我看來,我們應該是做合作組不能做的(例如深度學習系統API設計,新系統開發),而不是跟人搶項目。自然會有小夥伴做完這些項目後,覺得新項目太挑戰,想換個環境。
  • 李沐親自澄清事實!
    李沐本人是如何親答的?實名已離職員工如何表態? 近日,「如何看待亞馬遜 AI 李沐團隊大批人員離職?」成為知乎DL話題下的熱門問題,獲得了1500關注者和67萬瀏覽量。
  • 東京雪具購買指南 | 獨門砍價秘訣
    大家好,我是比利白去年的十一月,我走訪東京神田運動街,幾乎逛遍四十家雪具店後,寫下一篇《東京雪具購買指南
  • MXNet專欄 | 李沐:深度學習·煉丹入門
    機器之心授權轉載作者:李沐幾日前,機器之心經授權發表了李沐在知乎上回答的為什麼 MXNet 不火的一篇文章。最近,他又寫了一篇關於深度學習入門的文章,用詼諧的語言(對比煉丹)講解深度學習。此外,在本文中李沐也提到自己現在到了亞馬遜,要大力發展 MXNet 了,這是不是意味著幾大深度學習框架的格局再起變化呢?
  • Steam夏促剁手指南:二次元專場!10款特別好評佳作推薦!
    歡迎來到最新一期的剁手指南,我們今天的主題是二次元遊戲,我們為各位挑選了10款綜合評價為特別好評及以上的遊戲,一起來看看!
  • 全新版本,李沐《動手學深度學習》TF2.0版本來了
    還記得李沐老師的《動手學深度學習》嗎?近日,該書的 TF2.0 代碼復現項目來了。
  • 《被害者》怪物新人李沐想哭!張孝全雙料入圍視帝超威
    謝謝所有一起合作的演員與劇組工作人員,是大家共同努力的成果,非常感謝!!」 ▲《誰是被害者》張孝全入圍視帝、李沐入圍新人。(圖/Netflix提供) 上線後被觀眾、媒體一致譽為「最強怪物新人」的新生代女星李沐,這次榮獲新人獎提名,她接到入圍消息後激動表示:「我覺得好不真實喔!身體很想哭,但腦袋還沒感覺到真實感,家人完全不知道今天公布,我躲在房間裡想著要不要出去說一下,但突然覺得很不好意思,想說等我爸自己發現好了,反正他最近很關注我,應該等等就會發現了!
  • 李沐團隊人員離職,MxNet 英雄落幕?賈揚清:關鍵能否解決新痛點
    作者 | 叢末、蔣寶尚編輯 | 賈偉AI 科技評論消息:昨日,據知乎網友爆料,亞馬遜AI李沐團隊今年初至今已經離開6人了。考慮到李沐團隊一共20名正式員工,以及一個研究團隊招新的嚴格要求和團隊培養成本,6人離去對於一個團隊來說確實是一種重大的人員流失。
  • 剁手指南 | 想要5折買大牌?記得要去日上免稅店!
    人頭攢動的就好像什麼商場年終大甩賣了一樣~~之前我也陸續寫過4期關於日上的攻略,錯過的小夥伴們可以點擊下面連結,回顧請戳 ↓剁手指南 | 坐飛機出國不可錯過的日上免稅店,什麼值得買?剁手指南 | 坐飛機出國的買買買第一站,日上免稅店什麼值得買?
  • 金鐘獎最佳新人李沐大作!人氣網劇《不讀書俱樂部》諸多女神聚集
    金鐘獎最佳新人李沐大作!人氣網劇《不讀書俱樂部》諸多女神聚集《誰是被害者》之中的爆發性表演讓李沐在2020年金鐘抱來最好新人獎,現如今她挾著「妖怪新人」的氣魄殺進網劇《不讀書俱樂部》,身邊搭檔的組成也是一樣最好新人出身的蕭子墨,及其二位女神級新生代演員林映唯、黑嘉嘉,那麼精彩絕倫的卡司主力陣容,怎能錯過了!
  • 李沐團隊半年離開六人,MxNet是否英雄落幕?賈揚清:關鍵能否解決新...
    作者 | 叢末、蔣寶尚編輯 | 賈偉AI 科技評論消息:昨日,據知乎網友爆料,亞馬遜AI李沐團隊今年初至今已經離開6人了。考2、之前我們跟工程組一起做了很多純工程項目。在我看來,我們應該是做合作組不能做的(例如深度學習系統API設計,新系統開發),而不是跟人搶項目。自然會有小夥伴做完這些項目後,覺得新項目太挑戰,想換個環境。3、將我們的工作變成」essential「(amazon在疫情期間優先派送essential的商品),這個一直是研究工作的一個難點。