2021年的數字存儲預測第三部分:通用存儲體系結構、NVMe等的發展

2021-01-15 電子發燒友
2021年的數字存儲預測第三部分:通用存儲體系結構、NVMe等的發展

存儲社區 發表於 2021-01-12 09:29:10

 

2020年的疫情大流行逼迫我們在家辦公,使我們了解到數據連接中數字連接以及計算,內存和網絡的重要性。可想而知疫情流行結束後,在大流行期間創造的偏遠工作趨勢將繼續。根據INAP的最新調查報告,「 54%的人表示…大流行促使他們的組織將應用程式和工作負載移出了內部部署。IT專業人員還面臨著他們預期在2021年面臨的最大挑戰,調整基礎架構和網絡策略以實現長期遠程工作。」

一些行業尤其受到大流行的影響,因此不得不在存儲技術的幫助下爭先恐後地尋求生存之道。例如,在2020年的大部分時間裡,實時視頻投影將被關閉或受到嚴重限制。據Spectra Logic副總裁或產品管理和解決方案工程副總裁David Feller表示,「大流行導致了媒體和娛樂業(遭受重創的行業之一),幾乎完全依賴於重用先前存在的內容,因此對歸檔的訪問絕對至關重要。」

此舉將支持新的工作模型,提供對存檔的便捷訪問,以及機器到機器數據生成和數據移動的增長(隨著IoT,AI和其他大數據應用程式的增長),將推動數字存儲和存儲技術的發展趨勢。內存系統。我的2021年數字存儲預測的第三部分也是最後一部分,將探討2021年及以後的存儲/內存系統趨勢。

我們將探討通用存儲體系結構(NAS,SAN和對象存儲),NVMe和NVMe-oF(基於結構)以及CXL和GenZ的發展,並討論這些技術如何實現分解和可組合的數據中心。我們還將討論使用特殊和通用加速器的計算存儲和內存處理以及分布式處理的一般增長。最後,我們將研究存儲安全性的發展和需求,以應對勒索軟體和其他網絡安全攻擊。

NAS(將數據作為文件訪問)通常與非結構化數據(例如視頻和醫學圖像)相關聯,而SAN通常與已定義(結構化)的工作負載(例如資料庫)相關聯。高性能可擴展NAS在AI和大數據分析應用程式的存儲中也起著重要作用。但是,對象存儲(大型數據中心中最常見的存儲)也用於非結構化數據。橫向擴展NAS有時可以與對象存儲可擴展性競爭。此外,許多用於文件級訪問的軟體平臺為NAS或通過網關或其他訪問對象存儲的方法對數據進行文件訪問提供了一些優勢。預計2021年對象存儲和橫向擴展NAS都將增長。

數據中心應用程式中的對象存儲通常用在容器化的工作流中,可以根據需要旋轉或旋轉。創建和管理容器化應用程式的持久性存儲已受到許多不同工具的歡迎。其中一些工具也是可跨多個混合數據中心或雲存儲的存儲解決方案的一部分。Zedara表示:「將數據從本地遷移到雲或在雲之間遷移的需求是使用容器可以克服的挑戰,擁有一個通用平臺將使容器化在2021年達到新的水平。」到2021年,容器化應用程式和多雲環境的存儲和內存開發將增長。

在雲存儲增長的同時,它並不能完全取代本地存儲。Cloudian的CMO Jon Toor表示:「現在,所有公共雲提供商都提供內部部署解決方案,該解決方案將公共雲和內部部署定位為應結合使用的環境,而不是被視為一個或多個決策。此外,企業存儲提供商已經升級了他們的雲遊戲,建立了與公共雲一起工作而不是與之競爭的新解決方案。隨著雙方朝著中心方向發展,不可避免的結果是組織將把公共雲和內部部署視為企業存儲硬幣的兩個方面。」 除了傳統的內部部署和雲計算,隨著物聯網和更高速度的無線網絡的興起,網絡邊緣和端點的更多存儲和處理在2021年及以後將變得很普遍。「

優化存儲成本和性能的存儲分層僅將訪問最多的數據放在最快的(通常是SSD)存儲設備上。隨著數據量的增長,可訪問或存檔檔案中的數據量將增加。IBM全球超級增長存儲OM的Shawn O. Brurne表示:「由於2020年的挑戰,只有33%的IT預算縮減了,大多數預算將支出與移動訪問和安全性增強相結合。在保留一些基礎結構更改的同時,存儲需求也在不斷增長。Active Archives是最有效的降低基礎架構成本的方法,並且無需考慮罰款。大流行期間雲存儲中產生的增長將導致Hyperscale和Hyperscale-lite存儲提供商在活動歸檔上的支出增加。」

NVMe現在是新SSD存儲系統的主要存儲接口。NVMe在PCIe物理總線上工作,因此其性能將隨著未來PCIe總線的發展而不斷提高。NVMe over Fabric(例如光纖通道和乙太網)不僅可以廣泛使用各種遠程直接內存訪問(RDMA),還可以幫助實現存儲池和伺服器分解(包括分布式計算方法,通常稱為計算存儲,如下所述) )。隨著PCIe Gen4和早期Gen5總線的問世,基於NVMe的存儲解決方案將在2021年繼續佔據主導地位,並具有更快的連接性。下圖顯示了可分解的可組合基礎架構與傳統的融合基礎架構有何不同。

融合基礎架構與可組合基礎架構的比較

CXL接口還運行在PCIe總線上,與計算機上的傳統內存通道不同,它支持具有不同特性的內存(異構內存),例如Intel的Optane和DRAM,但也可能還有其他內存。CXL被吹捧為提供分解和合併內存的方法,並且還將導致接近內存的分布式處理,通常稱為內存中計算。  

CXL計劃還與GenZ計劃一起加入,人們普遍同意在盒子內使用CXL,GenZ用於盒子到盒子和機架到機架的連接。CXL和GenZ可能會在2021年的早期開發和演示階段中繼續發展,並在2022年或以後推出早期產品。下圖是在2020持久內存峰會上的VMWare演示,下圖顯示了CXL或GenZ用於為幾個伺服器服務的持久內存池。

顯示使用CXL和GenZ池化異構內存

計算存儲驅動器(CSD)使處理更接近數據存儲在存儲介質本身或介質控制器中的存儲位置。另外,例如通過Mellanox的最新一代智能NIC在存儲網絡中添加其他智能,可提供新的分布式處理選項。將處理移至更靠近存儲的位置可以減少處理數據的時間,還可以減少處理器與存儲之間移動數據的能耗。所有這些計算存儲方法都在結構上使用NVMe和NVMe over fabrics。SNIA的下圖顯示了使處理更接近存儲的數據的各種方法。

計算存儲示例

計算存儲最初是為了從計算機系統CPU卸載以存儲為中心的功能而開發的。這些初始用途包括數據壓縮,數據加密和RAID控制。但是,具有更複雜處理器的計算存儲可以執行更高級的數據分析功能,使其更接近數據,因此比使用CPU進行此數據分析要快。  

計算存儲可以使用ASIC或FPGA域特定的處理器(或加速器)。SNIA定義了固定計算存儲服務和可編程計算存儲服務。固定服務執行專用服務,例如數據壓縮,數據加密或簡單的RAID管理。可編程版本可以運行主機作業系統(通常為Linux),並且在其可以提供的本地處理方面更加靈活。我們希望在2021年看到具有可編程計算存儲服務的存儲系統的更多使用,以及在超大規模和企業應用程式中繼續使用固定服務。

除了基本存儲硬體的變化外,存儲軟體還將越來越多地使用AI工具進行存儲管理。StorageCraft的CMO Shridar Subramanian表示:「尖端存儲工具越來越依賴於AI和機器學習來自動執行數據備份過程。鑑於企業數據的爆炸式增長,這些智能工具對於維持高效的備份過程至關重要,該過程可以快速輕鬆地響應不斷變化的需求,同時節省大量的手動備份時間。」

由於許多員工在家工作,擁有大量有價值數據的組織更容易受到各種黑客和惡意軟體攻擊。其中包括勒索軟體攻擊,其中對用戶的數據進行加密,並且僅在支付勒索後才釋放數據(如果有的話)。存儲公司對此進行了回應,指出某些存儲設備和網絡存儲設備之間存在氣隙(例如使用磁帶備份),可以避免攻擊期間丟失大量數據。  

在可訪問的硬體上沒有敏感數據是保護該數據的重要方法。Druva的CISO和CIO Drew Daniels表示:「強大的數據保護架構將是確保端點不會因不必要的敏感或機密數據(例如PII)而變得混亂的關鍵。相反,重點應該放在備份此類數據上,然後在需要時在將來的某個時間臨時還原它。」

其他解決方案是WORM和不可變數據備份,可以防止數據加密和其他更改。Cathleen Southwick Pure Storage的CIO表示,「到2021年,監管機構將頒布更嚴格的數據隱私法來保護消費者,而CIO將把安全性放在首位,並投資於機密計算,虛擬私有雲和其他安全基礎架構。」

同樣,通常,由於數據保存在數字存儲中,因此提高數據移動的安全性是重要的開發領域,也是確保硬體中未內置某種後門的方法。控制組件供應鏈並使用分布式標籤之類的技術確保組件的來源將是存儲系統安全性的重要組成部分。此外,在建立存儲組件和存儲系統中的信任根源方面還有許多工作要做。我們認為,在2020年出現安全漏洞和惡意軟體攻擊後,到2021年,我們將重點開發更全面的存儲系統安全性。

到2021年,數據中心的存儲將繼續增長到本地,支持遠程工作的邊緣和端點以及IoT和AI工作負載的增長。隨著CXL,GenZ和其他存儲結構的不斷發展,NVMe和NVMe-oF將通常用於存儲系統。計算存儲將展示有用的應用程式,而存儲安全將成為保護寶貴的機構數據的重點。

參考連結:https://www.forbes.com/sites/tomcoughlin/2021/01/09/digital-storage-projections-for-2021-part-3/?sh=797f9b2b2abc

 

責任編輯:xj

       原文標題:2021年的數字存儲預測(第三部分)

文章出處:【微信公眾號:存儲社區】歡迎添加關注!文章轉載請註明出處。

 

打開APP閱讀更多精彩內容

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容圖片侵權或者其他問題,請聯繫本站作侵刪。 侵權投訴

相關焦點

  • 存儲市場數據結構
    存儲市場的兩類數據結構,分別是訂單和訂單簿。(1)訂單訂單種類包含成交訂單、出價單(bid)和報價訂單(ask)3種。存儲礦工提交報價單出售服務,用戶提交出價單購買服務。如果兩個訂單對某一價格達成共識,雙方共同創立一個成交訂單。
  • 阻擋HPC前行的「最後一公裡」,打破「存儲牆」迫在眉睫
    直到1958年電晶體的出現,計算機體積開始大幅縮小,運算速度提升至最高可達300萬次,這些可以算作是超級計算機發展的前身,但僅限用於國家主導的軍事科研工程。  超級計算機真正迎來大發展,是從1964年集成電路被大規模應用開始的。我國超級計算機研製就起步於這一時期。
  • 2020年中國數字經濟行業發展回顧及2021年市場前景預測
    從結構上來看,數字經濟包括數字產業化和產業數位化兩大部分。數字產業化,也稱為數字經濟基礎部分,即信息產業,具體業態包括電子信息製造業、電信業、軟體和信息技術服務業、網際網路行業等;產業數位化,也稱為數字經濟融合部分,即傳統產業由於應用數位技術所帶來的生產數量和生產效率提升,其新增產出構成數字經濟的重要組成部分。
  • 中國食品安全檢測行業調查分析及發展趨勢預測報告(2021-2027年)
    中國產業調研網發布的中國食品安全檢測行業調查分析及發展趨勢預測報告(2021-2027年)認為,截至**影響我國食品安全檢測行業發展的主要因素有以下幾個:食品安全檢測手段相對落後我國食品質量檢測檢測體系不健全,傳統式、突擊式、運動式抽查較多,食品檢測工作不能全程化、日常化、制度化,檢測的重點始終放在最終產品檢測上,對過程控制還不夠重視,導致有害食品流入市場。
  • 崢嶸四十年,存儲巨頭希捷眼中的「時」與「勢」
    「每個企業的DNA都不盡相同,希捷的DNA有三個:第一、技術創新,這是絕對核心的一點;第二、智能製造,希捷的智能工廠絕對算得上智能製造的先行者;第三、定位清晰,希捷發展四十年來,聚焦存儲市場,從未偏離一步。」希捷全球副總裁暨中國區總裁孫丹此前接受雷鋒網專訪時談到。以眼下大熱的視頻監控市場為例,希捷在這片土地上的變革與創新堪稱教科書級別。
  • 中國信通院發布《數字貿易發展白皮書(2020年)》
    2020年12月15日,在「2021中國信通院ICT+深度觀察報告會」 數字經濟分論壇,中國信息通信研究院(以下簡稱「中國信通院」)政策與經濟研究所高級工程師嶽雲嵩發布了《數字貿易發展白皮書(2020年)》。
  • 【深度解析】未來5年數字經濟中的關鍵技術將如何發展?
    2020年,星際無限作為數字經濟領域的排頭兵,經歷了分布式存儲及大數據行業的深刻洗禮,夯實團隊、深耕技術、豐富品牌是星際無限能夠行穩致遠的致勝法寶,在數字產業快速商業化的同時,星際無限還將繼續在分布式存儲這條路上,勇於擔當,砥礪奮進,載責前行!
  • 2021—2025年數字經濟九大技術趨勢展望
    不同國家、不同地區、不同行業、不同企業數字經濟發展的進程不同,當前我國正處於數字經濟的中期,技術進步對於社會發展的影響越來越大,生產方式、生活方式、商業模式都在加速演進。總體來看,社會生產力需求推動了技術的進步,技術的進步又進一步推動了經濟的發展。基於此,筆者在下文中預判了未來5年數字經濟中的關鍵技術發展趨勢。
  • MySQL中的存儲引擎是什麼意思?
    導讀:本篇文章是想聊聊MySQL為什麼要出現存儲引擎這項技術。「存儲引擎」從字面理解,「存儲」的意思的存儲數據。「引擎」一詞來源於發動機,它是發動機中的核心部分。在軟體工程領域,相似的稱呼有「遊戲引擎」、「搜尋引擎」,它們都是相應程序或系統的核心組件。
  • 小數在計算機中如何存儲?
    單精度浮點數32位=1位符號位+8位指數位+23位有效數字雙精度浮點數64位=1位符號位+11位指數位+52位有效數字下面以單精度浮點數為例(雙精度同理),來看看計算機是如何存儲的。指數位的範圍為0~255,但不包括0和255,因為它倆有特殊含義(下面會說到),因此單精度浮點數可表示的最大階數為127=254-127,最小階數為-126=1-127;有效數字:任何一個二進位的科學計數法(規格化)的係數第一位都是1,因此這個1沒有必要存儲,有效數字存儲的都是小數點後23位,因此23位有效數字可表示的精度卻是24位;符號位s指數位e有效數字m浮點數0、10000
  • 未來5年,數字經濟中的9大發展趨勢,值得關注!
    不同國家、不同地區、不同行業、不同企業數字經濟發展的進程不同,當前我國正處於數字經濟的中期,技術進步對於社會發展的影響越來越大,生產方式、生活方式、商業模式都在加速演進。總體來看,社會生產力需求推動了技術的進步,技術的進步又進一步推動了經濟的發展。基於此,筆者在下文中預判了未來5年數字經濟中的關鍵技術發展趨勢。
  • 科技:什麼是UFS3.0存儲?它將如何影響手機的性能?
    JEDEC在去年早些時候發布了UFS 3.0規範,但是直到今年,我們才會看到這個存儲設備真正應用到實際設備上。我們已經聽到傳言說,下一個one plus旗艦產品將使用UFS 3.0存儲,而且肯定不會是唯一的一個。什麼是UFS 3.0?通常,智慧型手機和平板電腦使用較舊且較便宜的eMMC存儲來存儲信息。然而從三星Galaxy S6開始,我們已經在旗艦智慧型手機上看到了通用快閃記憶體。
  • 谷歌宣布:2021年6月1日起,Google相冊不再提供免費存儲服務
    ALENG自媒體 舉報   谷歌於當地時間周三通過官方博客發布了一條重要信息:自2021
  • Google Photos將於2021年6月1日結束免費無限量存儲
    Google Photos將於2021年6月1日結束免費無限量存儲2020-11-12 16:58出處/作者:cnBeta.COM整合編輯:佚名責任編輯:zhaoyongyu1該公司宣布,從2021年6月1日開始,照片將再次計入用戶15GB的谷歌帳戶整體存儲上限。
  • 分布式存儲市場發展潛力有多大?加密雲儲CEO汪偉:這是千億藍海!
    面對社會對分布式存儲技術需求的日益增加,擁有8年的區塊鏈行業沉澱,以及3年多時間對分布式存儲、IPFS行業的研究和實踐的加密控股集團選擇在2020年正式進軍這個領域。加密控股集團旗下的子品牌【加密雲儲】將要怎麼把握住分布式存儲的風口?分布式存儲和新基建的未來如何?今天,我們很榮幸請到加密雲儲CEO汪偉先生跟我們深度探討。
  • HDF星盤文件系統 或將引領新一代大數據分布式雲存儲
    數字經濟時代,實體經濟數位化成為新時代發展的機遇。5G新技術的發布,推動著全球人工智慧、區塊鏈、雲計算、大數據等新興技術的發展。數字產業化、產業數位化,這無疑是科學技術的進步。新技術、新模式、新資本下的數字經濟,無疑給人們的社會生活帶來諸多便利,但與此同時,也給人們造成了信息洩露、數據篡改等數字存儲和數據傳輸存在的安全問題。
  • 每個C語言程式設計師都應該明白,計算機究竟是如何存儲小數的?
    IEEE-754浮點(32位)或雙精度(64位)有三個部分(在IEEE-854下也有類似的96位擴展精度格式):符號位,表示數字是正的還是負的;指數位;以及指定實際數字的尾數位。以C語言中的單精度浮點數為例,下面是某位浮點數的位布局:
  • 中國醫療衛生信息化行業市場調查研究及發展前景預測報告(2019年版)
    三、信息化助力農村合作醫療發展c    四、農村合作醫療實現網上審核報銷的條件n  第二節 2018-2019年中國部分地區農村醫療信息化分析中    一、湖南省新型農村合作醫療信息化建設概況智    二、安徽省積極推進農村醫療信息化發展林    三、上海進一步推進新型農村合作醫療信息化建設4    四、北海合浦縣新農合信息化發展情況0    五、江門蓬江區新型農村合作醫療信息化水平領先0  第三節
  • 【渠道漲薪課】2021年了,伺服器渠道轉型做存儲是否還有機會?
    從HPE最新的季度財報可以看到,計算部分運營利潤只有6.1%,但存儲的運營利潤是16.7%。也就是說,一般來說,存儲的項目利潤可以做到伺服器的2-3倍左右。而且,隨著用戶的數據的增長,一般來說,2年內,50%的存儲都有擴容機會。還有,存儲和用戶應用的關聯程度更高。不同的應用對存儲的要求都不同。這塊可以和應用廠商合作,構造出一些創新的,差異化的解決方案,避免純粹的價格競爭,掌握市場的主動。因此,綜合來看,做存儲有規模,有利潤,有客戶粘性,容易做一些差異化的解決方案,因此,IT渠道做存儲目前應該也還是比較好的生意。