數據存儲洪流下 PCIe快閃記憶體緣何脫穎而出?

2021-01-10 IT168

  【IT168 評論】當今形勢下,企業要保持競爭力,其應用的性能變得至關重要。數據需要能夠被即時訪問,以便其能夠被實時的處理、分析和解析。為滿足這樣的需要,企業客戶正主動將快閃記憶體加入到其存儲基礎設施中。

  由於需求加速增加,以及獲得客戶的認可,各公司的CIO們迅速認識到,快閃記憶體非常適合於資料庫、數據倉庫和大數據分析等性能密集型應用。

  儘管業界在大談全快閃記憶體和混合快閃記憶體陣列,然而,伺服器端快閃記憶體尤其是PCIe快閃記憶體出貨量已經開始起飛。Gartner Group預計,伺服器端快閃記憶體的出貨量在2015年將超過100萬片。此外,隨著PCIe快閃記憶體的價格逐漸降至接近1美元/GB,Gartner預計到2018年,所有出貨至數據中心的SSD中,有接近一半都將是PCIe快閃記憶體。

  在初期,只有使用橫向擴展架構和NoSQL資料庫的以部署超大規模應用的客戶採用PCIe快閃記憶體,而目前PCIe快閃記憶體的價格和性能優勢已使其成為這一類應用場景的主流存儲設備。此外,在最近興起的軟體定義存儲架構中,使傳統企業也可以在更多的應用場景使用PCIe快閃記憶體,而在這些軟體技術出現之前,往往需要使用外部延遲較高並且成本也較高的SAN架構存儲解決方案。

  用作SAN存儲緩存

  PCIe快閃記憶體最常見的用途就是在現有的SAN存儲設備前端添加緩存。這種方法對於現有的SAN架構存儲設備而言完全透明,同時將延遲從幾毫秒降低到幾十微秒,並可大幅提升現有基礎設施的IOPs能力。這種使用案例被廣泛部署在如單一PCIe設備和緩存軟體且價格不超過1萬美元的Microsoft? SQL Server的資料庫中。為獲得相同的IOPs,傳統SAN存儲可能需要5倍的費用,而且絕對不可能達到同等的低延遲水平。相對而言,PCIe緩存的方式實現了驚人的性能提升。在資料庫運行環境中,延遲意味著等待時間,即用戶得到響應時間;延遲越長,每秒完成的交易量就越少。時間就是金錢,基於PCIe快閃記憶體的緩存軟體是一種快捷而簡單的解決方案。

  共享式快閃記憶體訪問

  許多企業級資料庫需要訪問共享存儲。一個很好的例子就是Oracle單實例資料庫和 Oracle Real Application Clusters(RAC)。RAC使用Oracle自動存儲管理(ASM)作為資料庫的卷管理組件。ASM使用磁碟組來存儲數據文件,並提供基於伺服器的靈活鏡像選項。到目前為止,Oracle ASM使用快閃記憶體的唯一途徑就是使用部署在SAN陣列內部的快閃記憶體。然而,延遲和成本可能使得建立在SAN之上的Oracle資料庫變得非常昂貴,特別是隨著業務的發展,需要更多IOPs來保持工作負荷餘量。


▲HGST PCIe快閃記憶體卡

  HGST推出的軟體定義存儲產品,使PCIe快閃記憶體可以直接在資料庫伺服器內部以ASM磁碟組的形式進行管理和訪問。ASM可以根據數據存儲的需求聚合儘可能多的PCIe快閃記憶體以用於存儲更多的數據。由於存儲直接連在伺服器總線上,使用資料庫全快閃記憶體層可以達到微秒級的延遲(Oracle的Calibrate_IO工具無法測量出此量級的數值)。由於ASM可以應用於所有常見的存儲設備,ASM可以將數據遷移到SAN存儲上的大容量存儲設備中來降低價格並優化性能。快閃記憶體訪問共享的另一個附加好處是提高了伺服器的CPU核心使用率,從而降低Oracle許可證費用或提升現有許可證的有效價值。

  集群和伺服器整合

  對於MySQL這樣的資料庫來說,傳統方法是成對部署主/從伺服器。主伺服器屬於更大集群的一部分,集群中的資料庫行在多個主伺服器中橫向共享,以實現橫向擴展。從屬伺服器用於分擔讀操作的工作負荷,並作為主伺服器崩潰或數據被破壞時的故障切換節點。

  PCIe快閃記憶體速度快,延遲小,使得單臺設備便可以處理主伺服器上讀寫工作量。由於資料庫損壞和伺服器崩潰的情況十分罕見,許多從屬伺服器一直空轉耗電、佔用空間還需要冷卻。使用PCIe快閃記憶體設備和伺服器端快閃記憶體集群軟體可以很輕鬆地解決這種「伺服器無序擴張」問題。

  集群軟體允許多個主伺服器將其所有的快閃記憶體資源聚集為一個資源池,然後為每個主伺服器分配池中的一個卷。單節點從屬伺服器或者安裝少量開源軟體的多功能伺服器將以「監聽者」的身份運行。當主伺服器出現故障時,多功能伺服器掛載相應的卷並繼續操作,避免了停機;由於所有的主伺服器都將數據同步複製到資源池中,在故障切換時將不會有丟失數據。這一點非常重要,因為原生的本地MySQL複製為異步複製,部分交易記錄可能會被丟失。此項針對MySQL實際部署進行的改變簡單而巧妙,能夠依據集群大小的不同將伺服器的數量減少至介乎38%到70%。

  凝視未來:接下來是什麼

  在這些任務關鍵型企業環境中,延遲意味著等待時間,即用戶等待響應時間,延遲越長每秒完成的交易量就越少。時間就是金錢,因此快閃記憶體成為一個越來越有吸引力的解決之道。這意味著效率、性能和可擴展性的標準將受到緊密的關注。企業要取得成功,則需要從自己的數據中提取出更大的價值。

  硬體和軟體解決方案必須幫助CIO們在性能、複雜度和成本之間取得平衡,即專注於以全SSD環境加速峰值應用,通過分層或使用緩存來利用硬碟和快閃記憶體相結合的環境從而改善滯後的性能。

相關焦點

  • 數據洪流時代:劍魚和它引領的搏水者
    如今,數據洪流中出現了一條「劍魚」——7月23日,華為發布了新一代智能存儲OceanStor Dorado V6,提出了「數據+智能」的存儲架構理念。劍魚的出現,會為洪流中的搏水者指明方向嗎?我們不妨先來看看,在數據洪流中都有哪些「礁石」和「暗湧」。
  • 話題回歸於成本 快閃記憶體存儲為何升溫不停?
    【PConline 雜談】快閃記憶體存儲機制在進入我們的視線以來,一直在拿求速求量的慣用方式在吸食著不同市場,從消費領域到數據中心,快閃記憶體技術都在拿出成本與功耗、延遲等等技術關鍵詞做換算。在前不久,甚至有快閃記憶體技術成本將有低於SATA磁碟,再次拉拽我們再次關注固態快閃記憶體技術最基本最核心的關鍵詞:成本。
  • 長江存儲128層快閃記憶體研發成功 擁有業界最高單位存儲密度
    長江存儲近日宣布:128層QLC 3D NAND快閃記憶體晶片X2-6070研發成功,並已在多家控制器廠商SSD等終端存儲產品上通過驗證。長江存儲128層快閃記憶體研發成功長江存儲表示,X2-6070是業內首款128層QLC規格的3D NAND快閃記憶體,擁有業內已知型號產品中最高單位面積存儲密度,最高I/O傳輸速度和最高單顆NAND快閃記憶體晶片容量。此次同時發布的還有128層512Gb TLC(3 bit/cell)規格快閃記憶體晶片X2-9060,以滿足不同應用場景的需求。
  • 書生雲王東臨:快閃記憶體將取代硬碟 帶來存儲「蒸汽機革命」
    當前,隨著大數據時代的來臨,存儲業也在悄然上演一場新的革命,這場新的革命是由快閃記憶體引發的。與過去單純的數據存儲不同,大數據技術的應用日臻成熟,讓數據分析變得日趨重要。企業也越來越傾向於通過應用快閃記憶體帶來巨大的經濟效益和成本的下降,以應對數據的爆發。如果說過去快閃記憶體的應用還只是存儲領域的新潮流,現在則逐漸成為市場的主流。
  • 2018企業存儲年度回顧:快閃記憶體,SDS與超融合
    2018年,全球存儲市場在軟體定義存儲、快閃記憶體和超融合這三駕馬車帶動下迎來了新一輪的增長,在這三大趨勢的相互帶動下,整個存儲產業從底層介質,到設備層,到系統層,到應用方面,都在不斷迭代創新中推陳出新,在這個數據戰略意義越來越明朗的時代,存儲數據的方式也自然更重要了。
  • 國防科技大學方糧:快閃記憶體技術進展及新型存儲技術
    從移動存儲到大系統構成,如今的快閃記憶體應用變得極為廣泛,快閃記憶體構成的固態SSD表現出很好的特性,目前主流的SLC/MLC/TLC都已經有存儲產品投入應用。縱觀整體存儲市場,SSD與傳統磁碟PK,以及前者獲得更加廣泛的普及,關鍵依然在於價格。除此之外,我們還應當了解現今快閃記憶體技術的發展進程,以及更多的新型存儲技術。
  • 從「東芝存儲」到「Kioxia」 如何看「新NAND快閃記憶體公司」狹縫生存?
    從「東芝存儲」到「Kioxia」 如何看「新NAND快閃記憶體公司」狹縫生存? 2017年9月20日,東芝存儲正式決定由Pangea出售,Pangea是由投資公司貝恩資本(Bain Capital)牽頭的財團。至此,東芝與威騰電子之間的糾紛仍在繼續。東芝存儲器的銷售計劃被大大推遲了,由於債務過多,東芝本身也面臨著退市的危機。東芝本身雖然未退市,但已於2017年8月1日從東京證券交易所的一部分降級為第二部分。
  • 象限晉級,「挑戰者」浪潮存儲的新挑戰
    在發布2020年最新版主流存儲陣列魔力象限報告中,Gartner將主流存儲陣列定義為全快閃記憶體或混合快閃記憶體及磁碟本地存儲陣列,提供塊服務(結構化數據工作負載)以及可能的文件和對象訪問。  針對主存儲市場未來走向,Gartner分析師還列出了三個戰略規劃設想:  到2025年,將有50%或更多的企業轉向基於OPEX(運營支出)存儲消耗模式。
  • 如何為系統選擇合適的NAND快閃記憶體?
    NAND快閃記憶體是一種大眾化的非易失性存儲器,主要是因為小型,低功耗且堅固耐用。 儘管此技術適合現代存儲,但在將其列入較大系統的一部分時,需要考慮許多重要特性。 這些特性適用於所有類型的存儲,包括耐用性,密度,性能,每千兆字節價格,錯誤概率和數據保留。
  • PCIE+RGB燈 影馳HOF名人堂SSD評測
    根據官方披露的信息,此款主控在工藝上,採用臺積電28nm工藝製造,同時支持八個NAND快閃記憶體通道,支持PCI-E 3.0 x4總線、NVMe 1.3標準、第四代SmartECC LDPC糾錯機制、AES-256/TCG Opal/TCG Pyrite安全加密等技術,兼容未來96層堆疊的3D TLC/QLC快閃記憶體顆粒,最大容量8TB,還支持雷電3移動SSD。
  • 2020中國數據與存儲峰會在京召開
    在這個充滿挑戰的社會,什麼樣的存儲是您最合適的需要?是存儲陣列,還是分布式存儲?是高端存儲,還是全快閃記憶體陣列?如何使用以Optane為代表SCM技術?區塊鏈和存儲碰撞出怎樣的火花?數據基礎設施如何滿足雲原生化應用的業務需求?2020年11月18日,在北京召開的」2020中國數據與存儲峰會」,吸引了線上線下數千名行業內人士的共同關注。
  • 你知道NAND快閃記憶體的種類和對比?
    由於快閃記憶體的成本取決於其裸片面積,如果可以在同樣的面積上存儲更多數據,快閃記憶體將更具成本效益。NAND快閃記憶體有三種主要類型:單層單元(SLC)、多層單元(MLC)和三層單元(TLC)。顧名思義,在相同的單位面積上,TLC快閃記憶體比MLC存儲的數據更多,而MLC又比SLC存儲的數據多。另一種新型的NAND快閃記憶體稱為3D NAND或V-NAND(垂直NAND)。
  • 江口沉銀遺址緣何脫穎而出
    江口沉銀遺址緣何脫穎而出 本報製圖/朱濉 彭山江口明末戰場遺址發掘區。在眾多優秀考古項目中,江口沉銀遺址何以脫穎而出?□本報記者 吳曉鈴競爭異常激烈2017年度是考古收穫非常豐碩的一年,入圍的26個項目發掘成果和研究水平都可圈可點  「全國十大考古新發現」已舉行20多屆,每屆入圍終審的項目為25項,但2017年度入圍項目卻增至26項。這並非評審規則有改變,而是評選從初審開始就異常激烈,最終因有項目並列的原因,終審項目不得不增加。
  • 3D NAND快閃記憶體有多遠?未來將如何發展?
    目前,這一需求已經通過許多發展得到滿足,不僅當今的快閃記憶體控制器的功能,還有特別是3D NAND架構,這一直是過去十年存儲討論和發展的中心。 隨著工業物聯網(IIoT),智能工廠,自動駕駛汽車和其他數據密集型應用程式繼續受到關注,這些高要求的應用程式對數據存儲的規定變得越來越具有挑戰性。
  • TLC 快閃記憶體顆粒為什麼不好?
    TLC是一種快閃記憶體顆粒的存儲單元,它的英文是TLC = Trinary-Level Cell,即3bit/cell。在TLC發明之前,固態硬碟大部分採用SLC和MLC,即Single-Level Cell單層單元和Multi-Level Cell多層單元。
  • 都是存儲器,但RAM、ROM、快閃記憶體、硬碟怎麼分?
    曾經有一段時間,我對電腦、手機上的RAM、ROM、內存、快閃記憶體、運行內存、機身內存、存儲空間等都"傻傻分不清楚",後來花了不少時間,才把這幾者的來龍去脈分清楚。如果光看"存儲器"這個名字的話,可能很多人會把它們都當作U盤、存儲卡、硬碟等永久存儲數據的器件,其實這是片面的。說到這,還要從電腦(手機)的內部結構說起。存儲器是電腦中的重要部件,主要分為以RAM和ROM為代表的內存(主存儲器),和以機械硬碟和快閃記憶體為代表的外存(輔存儲器)。
  • 都是NVMe SSD 為什麼威騰電子SN500更值得選購?
    近期,有媒體對家用主流的3款NVMe SSD進行了對比評測,並選擇了TLC和QLC兩種不同類型快閃記憶體顆粒的產品,威騰電子WD Blue SN500被評選為最值得選購的高性價比NVMe SSD,到底是哪些原因讓它能夠脫穎而出呢?
  • 快閃記憶體廠商密謀PLC快閃記憶體:成本再降25% 2021年前不會上市
    隨著NAND快閃記憶體不斷跌價,上遊的NAND廠商們也不斷推出更廉價的快閃記憶體解決方案,去年QLC快閃記憶體開始上市,這還沒等普及呢,業界今年開始討論起PLC快閃記憶體了單元可以存儲4位電荷,總計數有16組電壓變化,控制起來相當複雜,所以寫入速度更慢,可靠性也更差了。
  • EMC在中國正式發布第二代全快閃記憶體DSSD D5
    超融合架構更多是作為 Appliance,由VMware的一系列軟體定義,採用標準化商用標準硬體,適合放在分布式的企業環境下,運行伺服器,VDI,混合雲等負載,完成 SDDC的橫向擴展。全快閃記憶體版VMAX——2016年要讓快閃記憶體主存儲EMC認為今年是快閃記憶體之年,讓快閃記憶體做主存儲,主存儲對存儲可靠性要求不是一般的高,葉成輝表示新推出全快閃記憶體的VMAX能達到6個9的可靠性。
  • 全快閃記憶體陣列供應商TOP 10,第一不太出名?
    【IT168 評論】隨著快閃記憶體成本的降低,其遠遠優於傳統機械硬碟存儲的性能優勢也被逐漸放大,加上業務需求等一系列原因,在數據中心部署全快閃記憶體存儲陣列也越來越普遍。Gartner在2017年年中發布的一項關於全快閃記憶體市場的調查報告中指出,全快閃記憶體陣列市場在2016年增長了72%,總收入約46億美元。