如何構建適用於高級工作負載的可組合分解基礎設施

2021-01-20 51CTO

企業如今正在生成比以往更多的數據,但他們還需要可以理解所有這些信息的應用程式。許多人正在採用人工智慧、大數據分析和其他先進技術,這些技術可以從數據中獲得有意義的見解。但是,這些應用程式需要足夠的IT基礎設施提供支持,這些基礎設施有時甚至包括高性能計算環境。

只靠基礎設施提供支持是不夠的。用戶需求在不同的應用程式之間可能有很大的差異,甚至在同一個應用程式中也會有波動。這些不斷變化的應用程式需求使得傳統的基礎設施很難滿足高級工作負載的需求。因此,許多組織現在都在尋求採用可組合分解的基礎設施。

大數據分析和其他高級應用程式

在當今的企業中,數據可以來自事務系統、物聯網設備、社交媒體網站、網絡日誌、用戶設備、受監控的IT系統和各種其他來源。通過從這些數據中獲得見解,組織可以獲得多種好處。例如,他們可能會使用這些信息來優化IT運營或提高員工的生產率。另外,他們可能會使用它來改善客戶服務或獲得競爭優勢。

全面的數據分析需要結合先進的技術,如機器學習、深度學習、神經網絡或預測分析。這些應用程式需要足夠靈活和可擴展的基礎設施,以適應它們之間的差異。例如,採用機器學習進行統計可能使用更小的數據集和更少的計算資源,而深度神經網絡可能需要更高的性能和更多的數據。

IT團隊必須能夠經濟高效地運行兩種類型的應用程式,同時仍要提供必要的性能。這本身可能很困難,但是單個應用程式也可能帶來挑戰。高級應用程式在經歷多個階段時可能會有不同的要求,因此在不同的時間需要不同的計算和存儲資源。例如,攝取數據可能是I/O密集型操作,而訓練和驗證模型可能需要大量的CPU和內存資源。

滿足所有爭奪相同資源的多個應用程式的不斷變化的需求可能是一個艱巨的過程,並且是難以實現的目標,尤其是在試圖最大限度地利用資源時。如果應用程式需求不可預測且不斷變化,那麼即使是傳統的高性能計算(HPC)平臺也會出現問題。高級應用程式在需要資源時需要正確的資源組合,否則會面臨嚴重延遲的風險。

可組合分解基礎設施的好處

傳統的基礎設施很難滿足當今高級工作負載的要求。這些系統遵循通常複雜且不靈活的架構,因此很難在不過度配置或未充分利用資源的情況下適應不斷變化的工作負載需求。這並不是說這些系統無法更新或重新調整用途,但這樣的過程既耗時又昂貴,同時導致基礎設施也同樣面臨僵化的情況。

使事情複雜化的是,供應商針對特定的工作負載優化了許多系統,並且將硬體和軟體緊密捆綁在一起,這使得快速響應不斷變化的應用程式需求變得更加困難。例如,近年來超融合基礎設施(HCI)已被證明非常受歡迎,因為它簡化了部署,但同時也受到資源比例固定和靈活性有限的影響。分解後的超融合基礎設施(HCI)改變了這一情況,但它仍然針對特定的工作負載,不支持在裸機上運行的應用程式。

由於其他基礎設施的局限性,許多組織正在採用可組合的分解基礎設施,它將硬體分解為邏輯資源池。在這些資源池中,用戶可以按需提供資源,以適應不斷變化的應用程式需求。這不僅可以幫助滿足當今高級應用程式的基礎設施和資源調配需求,而且還可以提高資源利用率。此外,可組合的基礎設施為自動化和基礎設施即代碼打開了大門,帶來了更大的靈活性和更快的上市時間。

隨著可組合的業務需求的不斷變化,分解的企業可以根據不斷變化的業務需求和可組合的應用程式配置和需求進行重組。資源成為一個彈性的構建塊,用於提供優化的環境,該環境的配置可以支持特定的工作負載,而不必等待冗長的IT分配過程。當應用程式不再需要這些資源時,這些資源將返回到資源池中,供其他應用程式使用。

可組合平臺的核心是管理軟體,該軟體將物理計算、存儲和網絡硬體抽象為可根據需要訪問的服務,就像雲計算服務一樣。當平臺接收到對應用程式資源的請求時,可組合的軟體動態地組合組件並確保其可用性,直到不再需要它們為止。

通過這種方式,可組合的分類基礎設施可以適應廣泛的工作負載(包括人工智慧和高級分析),無論是在虛擬機中運行,是在容器中運行,還是在裸機上運行。

現實世界中的可組合性

可組合分解的基礎設施正在成為部署包含機器學習和深度學習等先進技術的應用程式的一個引人注目的選擇。事實上,市場上已經有幾種可組合的產品,例如HPE公司的Synergy平臺、Dell EMC公司的PowerEdge MX模塊化基礎設施和Liqid公司的可組合基礎設施軟體平臺。

隨著可組合架構的不斷成熟,許多行業都將從中受益。這包括醫療保健、金融服務、託管服務提供商、大學和政府研究人員,以及幾乎所有計劃運行高級工作負載的組織。

事實上,可組合性已經取得了重大進展。例如,德州農工大學工程學院的研究人員最近從美國國家科學基金會獲得了390萬美元的資助,以開發下一代可組合高性能計算平臺。研究人員將利用該平臺探索在數據驅動發現中利用機器學習的新方法,這將有利於依賴人工智慧技術和大數據實踐的廣泛科學領域,如網絡安全、基因組學、農業科學、氣候建模、生物醫學成像等。

大學並不是唯一進入可分解的基礎設施潮流的機構。Liqid公司最近與美國國防部籤署了一份3200萬美元的合同,為美國陸軍工程兵團提供兩個可組合的高性能計算(HPC)系統,這些系統採用了Liqid公司和英特爾公司的技術。工程兵團將使用該系統運行人工智慧應用程式,從而幫助在全球範圍內提供必要的軍事和民用工程服務。

可組合分解的基礎設施行業還相對年輕,和可組合平臺本身一樣充滿活力。但是,組合架構在過去幾年取得了長足的進步,而且很可能還會繼續發展。可組合性並不一定對所有的工作負載或環境都有好處,但它在適應應用程式方面有很大的幫助,特別是那些結合了人工智慧和其他先進技術的應用程式。

相關焦點

  • 構建精細化運營的智慧數據中心
    對於pPUE來說,還需要綜合考慮負載分布情況,實現一個電源系統分供多個負載的精確計算。   供冷網絡的測量主要是藉助冷量儀實現,對於一拖多的供冷網絡,需要將支路冷量數據信息通過加權的方式將能耗分解到指定的區域負載。   因此,供電、供冷網絡模型的準確性,所具有的測量條件,以及所採用的測量技術是能效準確評估的前提條件。
  • ( )可以顯示如何把項目可交付成果分解為工作包,顯示項目可交付...
    ( )可以顯示如何把項目可交付成果分解為工作包,顯示項目可交付成果的分解。  高效備考:加入2021年諮詢工程師高效實驗班 選報1+1考期可續學哦!
  • 微服務架構開發實戰:如何實現微服務的自動擴展?
    例如,高效地將容器分配給基礎設施,這對開發人員和管理員來說是透明的。 ●為開發人員提供一個抽象層,以便他們可以將其應用程式部署到數據中心,而無須關心到底應用是要使用哪臺機器。 可以是最少的人為交互。 ●通過最大限度地利用可用資源來高效構建、部署和管理應用程式。
  • 華為雲擎天架構 引領雲基礎設施升級
    張宇昕表示,「基於擎天架構的雲基礎設施,實現了全場景的一致體驗與生態,為客戶提供最優算力、極致效能、穩定可靠的雲。華為雲通過持續不斷的技術創新,成為政企智能升級的首選,智能世界的黑土地。」圖 華為雲CTO張宇昕解讀華為雲擎天架構雲邊端全場景,擎天架構全搞定擎天架構由華為歷時八年打造,從2012年啟動預研,2014年構建軟硬協同系統,2017年應用於華為雲,由500+專利加持、10萬+節點打磨,實現了「支持共享存儲的裸金屬伺服器」、「千萬級PPS
  • 聯想戰略籤約維諦技術(Vertiv)共同構建新型ICT基礎設施服務生態
    以此次籤約為契機,雙方將發揮以智能化服務為驅動的解決方案核心優勢,通過構建服務生態,為政企客戶智能化轉型提供新型ICT基礎設施建設和全周期智能化轉型服務。  聯想集團與維諦技術(Vertiv)深度座談  當前,ICT基礎設施成為構建數字經濟的基礎,實現信息基礎設施的普及共享,對實現產業及城市的數位化管理都至關重要。
  • 中金:春風化雨 點石成金——中國基礎設施REITs系列研究總報告
    REITs不僅打通了實體資產與金融市場間的投融資路徑,其亦股亦債的特性也使其成為投資組合中重要的配置品種。構建中國公募REITs是深化金融供給側改革、促進經濟雙循環發展的重要舉措。REITs可實現特定物業資產組合在二級市場上的打包上市。REITs投資人通過持有該資產組合的權益份額(基金份額)分享租金收入和資產增值收益。REITs的最大特點是需要充分派息,並且在滿足一定派息比率和其他運營條件下可以享有稅收優惠。對於一般投資人來說是以小份額參與實體資產投資的理想工具。
  • 詳解最大化從滿負載到空負載時的AC/DC效率
    雖然在AC/DC電源設計中最大化滿負載時的電源效率是一個優先考慮的因素,但是待機功耗標準以及新型電源效率標準也隱現出了更多的考慮因素。
  • 八分量阮安邦:區塊鏈構建可信數據基礎設施
    因為行業領域範圍內,他們的技術路徑幾乎尚無對標可尋,也很少有人敢和他一起「冒險創業」。  在北京中關村一棟辦公樓的小型會議廳內,眼前的阮安邦是典型的「工科男」形象。為什麼選擇創業這條路?「記得在北大第一次面見導師時,我就說想創業,想做最先進的科技,做別人做不到的事。」
  • 工程師寶典:幾種帶不平衡負載的逆變器拓撲結構
    Δ/Y變壓器三項逆變器拓撲結構在三橋臂逆變器和負載之間加一個Δ/Y變壓器,Δ/Y形連接次級能給不平衡負載所產生的中性電流提供電流通路,而初級則給引起的由負載不平衡或而Δ/Y變壓器工作在基波頻率,因而體積、重量較大,成本較高。中點形成變壓器(NFT)式三相逆變器為了給不對稱負載供電,可以在三相輸出端加入一個中點形成變壓器,(Neutral Formed Transformer,NFT),如圖所示。NFT是將三相三線制電源轉換為三相四線制電源的變壓器,有兩種結構形式:雙繞組和單繞組結構。
  • 如何正確計算感性負載浪湧電流的熱溫升
    汽車的控制器控制著各種類型的負載,包括阻性負載、容性負載和感性負載。例如,車燈在車身控制模塊的負載中佔有很大比重。不正確的設計和器件選型會對控制器造成失效,影響產品的質量。本文詳細解釋了燈泡在浪湧電流下的物理模型和仿真模型,進而給出了如何在設計中計算浪湧電流,並驗證在此條件下器件的設計安全。
  • 中國基礎設施公募REITs的重要現實意義
    REITs的底層資產和股票、債券的相關性較低,可以降低投資組合的波動,給投資組合帶來更好的分散性和收益回報。因此,從海外成熟市場來看,REITs是成熟資本市場的重要組成部分,在全球範圍內已經發展成為獨立的資產類別,是機構投資者特別是保險和養老金等「負債驅動」的長期資金投資配置的重要方向。
  • 教程| 如何使用TensorFlow構建、訓練和改進循環神經網絡
    本文將提供一個有關如何使用 RNN 訓練語音識別系統的簡短教程,其中包括代碼片段。本教程的靈感來自於各類開源項目。這些數據的文件使用數據集對象類被加載到 TensorFlow 圖中,這樣可以讓 TensorFlow 在加載、預處理和載入單批數據時效率更高,節省 CPU 和 GPU 內存負載。
  • 如何用遊戲化思維構建「好玩」平臺?
    QQ小程序遊戲中心主打豐富多樣化的小遊戲,作為設計師如何通過視覺表現構建一個更好玩的平臺,向用戶傳達「好玩」的感受。從遊戲中學習什麼是 「好玩」為什麼在遊戲中我們明知得不到實質的回報,卻願意投入大量時間和金錢?
  • 亞馬遜雲服務推出EC2 Mac新實例 可在雲端原生運行macOS工作負載
    原標題:亞馬遜雲服務推出EC2 Mac新實例 支持開發和原生運行macOS應用程式   隨著 AWS re:Invent 項目的啟動,亞馬遜雲服務又於今日宣布了面向開發者 EC2 Mac 新示例,以便客戶直接在雲端原生運行 macOS 工作負載。
  • 如何從標準化體系構建走向企業成功?
    為了保障標準化工作的有效開展,標準化工作組(包括集團公司領導小組、項目工作組、各專業組和經驗總結組)配備足夠數量符合資質要求的人員,共計100餘名,由集團公司各核電相關單位人員組成,大部分人員具有工程實踐經驗,中、高級職稱比例80%以上;人員選配結構合理、年富力強。