青雲科技自研分布式存儲全線升級 挖掘數字時代潛力

2020-12-27 砍柴網

QingStor是青雲QingCloud(qingcloud.com)企業級分布式存儲產品線品牌,包括NeonSAN、對象存儲、文件存儲和融合存儲四款產品。通過八年的打磨,青雲QingCloud近日全面升級了QingStor系列產品:QingStor NeonSAN升級至3.0,並一口氣發布了全閃一體機和容器存儲一體機新品;QingStor對象存儲3.0版本進一步平衡容量和性能;QingStor文件存儲升級到2.0版本,並持續提升性能。另外,還全新升級了管理平臺Portal 3.0。

自主設計研發應對企業級存儲市場變遷

作為企業數位化轉型的基礎,企業級存儲一直是業界關注的焦點。過去10年,企業級存儲市場發生了深刻變化,QingStor存儲產品線研發負責人王煜認為,主要呈現兩大發展趨勢:

一是分布式存儲正在經歷快速增長時期。IDC 2019年市場預測報告顯示,無論是對象存儲、文件存儲還是塊存儲,在未來幾年裡都會保持兩位數高速增長。

「現如今,企業內部分布式存儲部署的佔比越來越重,甚至在一些企業裡超過了傳統存儲。分析其背後的原因,主要來源於過去10年裡,包括移動網際網路、大數據、5G、AIoT等新興技術應用場景對於存儲提出新的需求。比如對高容量的需求,對更複雜場景(如雲計算)的需求。分布式存儲正因為場景的不同而產生巨大的增長。」 王煜表示。

二是全快閃記憶體儲逐漸成為主流。IDC市場報告顯示,全快閃記憶體儲在所有採用存儲的企業裡,幾乎已經佔80%的使用率,且從現在往後,幾乎每年都會保持50%的年均高增速。分析其背後的主要原因,在於SSD全閃介質的成本正在逐年快速下降,這是企業採用全快閃記憶體儲最主要的驅動力。

基於當前存儲市場發生的巨大變化,QingStor研發團隊投入了巨大的研發精力,從2012年開始推出第一個版本的雲計算產品開始,就在存儲的底層堅持採用完全自研的方式,積累了大量的雲計算環境的技術實踐。到目前為止,QingStor產品家族裡有四款專業存儲產品,包括NeonSAN、對象存儲、文件存儲和融合存儲,共同支撐著市面上幾乎全部主流雲計算產品。

「這四款產品每一款都是在架構設計時採用獨立的設計方法,跟開源存儲不同,幾乎所有開源的存儲或者基於開源存儲的商業存儲產品,都有通用的、統一的存儲底層,而QingStor每一款存儲產品都是獨立進行架構設計和開發的。」 王煜表示。

為什麼QingStor每一款存儲產品都要獨立架構設計和開發?王煜告訴記者,因為企業的存儲場景越來越多樣和複雜,不存在一種架構設計能夠完全滿足所有存儲場景。有些場景需要極致性能,有些場景需要大容量,有些場景需要高IOPS,有些場景需要高吞吐,有些場景需要通用的接口。為了滿足多場景應用,QingStor把存儲場景大概分為熱數據、冷數據、溫數據以及混合場景,並有針對性地設計不同存儲產品。

QingStor NeonSAN為核心業務而生

提到SAN,大家首先想到的詞是高端,也就是說上面可以跑核心業務,如資料庫。在設計QingStor NeonSAN時,青雲QingCloud希望打造一款擁有極致性能的分布式存儲產品。因此,在技術設計時,採用縮短I/O路徑棧、去掉本地文件系統、提高協議轉換效率等方法,打造一款擁有極致性能的分布式SAN存儲產品。正是因為這樣的設計,QingStor NeonSAN能夠穩定地支撐企業的核心業務,比如核心資料庫Oracle RAC。到目前為止,市面上可以很穩定、快速地跑Oracle RAC的,幾乎都是傳統存儲。在分布式存儲裡,QingStor NeonSAN應該是第一款,也是唯一一款能夠很好支持Oracle RAC的存儲產品。

從1.0版本到現在的3.0版本,QingStor NeonSAN 整個產品迭代都在圍繞核心場景打造產品的能力。截至目前,持續賦能以下四個主要核心場景:雲平臺/虛擬化場景、大數據場景、業務連續性場景以及最近這兩年非常火的容器/雲原生的場景。作為一款可以獨立售賣的分布式塊存儲,QingStor NeonSAN 除了可以與QingCloud雲平臺形成完美的對接、實現雲平臺層面的統一管理和性能的最大優化之外,還能很好地對接目前業界主流的虛擬化平臺、雲計算平臺,如VMware平臺、OpenStack平臺、Hyper-V平臺。

為了進一步優化企業用戶落地容器平臺的生產環境,青雲QingCloud 推出了KubeSphere KF3000容器一體機。

「如果青雲QingCloud只是把目前在國內第一款開源容器平臺KubeSphere,以及分布式塊存儲QingStor NeonSAN的軟體提供給企業,企業還需要做大量配置的工作,在落地生產上也要再做優化。這和容器平臺要極大便捷運維者、開發者的理念是不一致的,所以青雲QingCloud決定推出容器一體機KF3000。」 QingStor存儲產品線產品經理馮相東表示。

KF3000這款一體機不是功能模塊的簡單拼湊,而是通過大量的深層優化而具有整體性的產品,提供整體的商用級服務。另外,這款產品裡的核心組件經過規模化的生產驗證,提升了可靠性。

此外,青雲QingCloud還推出了QingStor NF6000分布式全快閃記憶體儲一體機:雖然基於標準的x86伺服器以及其他看似平常的硬體配置,但性能確很高,通過最小規模的3節點集群,QingStor NF6000分布式全快閃記憶體儲一體機可以給客戶3節點100萬IOPS的性能指標,並且保證時延在0.5毫秒以下。除了性能是最大的亮點外,作為一體機,QingStor NF6000分布式全快閃記憶體儲一體機提供開箱即用的體驗,插電後簡單地配置就能應用。在運維層面,針對已選定的硬體,還支持硬碟點燈等功能,提高運維效率。

QingStor對象存儲 3.0提升性能應對海量數據

對象存儲是分布式存儲領域裡一個新晉的派系,可以解決非結構化數據存儲問題,如海量圖片、音視頻、日誌、歸檔備份等。這些數據讀取的頻率並不是特別高,通常是一次寫入、多次讀取的模型。但是其數據容量、數據數量非常大。因此QingStor對象存儲設計的核心是承載海量的數據。在整個架構設計時,青雲QingCloud採用了完全Share-Nothing的架構,沒有任何單點,每一個組件都是可以無限水平擴展,並且性能不會下降。

QingStor對象存儲產品經理賈斌表示,本次升級的QingStor對象存儲3.0 版本帶來了兩大新能力,第一是服務更多數據場景(譬如數據遷移、數據保護、數據備份、AI視頻監控),第二是更強大、更具優勢的存儲性能,來應對用戶更複雜多樣的需求場景。

值得一提的是,本次發布的QingStor對象存儲3.0版本,單bucket(存儲桶)可以支撐100億個對象的同時,性能卻不會下降。

QingStor文件存儲2.0版本性能大幅提升

如果說存儲技術是整個IT技術的皇冠,那麼文件存儲則是皇冠上的明珠。文件存儲在技術架構的實現上是非常複雜和艱難的,目前在世界範圍內能做好文件存儲,尤其是能夠做好一款分布式文件存儲的廠商少之又少。

在過去幾年時間裡,QingStor研發團隊一直在認真打磨文件存儲。QingStor 文件存儲研發負責人黃蒙告訴記者,QingStor文件存儲旨在打造一款基於通用文件接口的多租戶文件系統, 以幫助更廣泛的應用在雲計算基礎架構下享受可擴展、高可用、高性能的文件存儲服務。

據介紹,全新發布的QingStor文件存儲2.0版本,是為通用場景設計的。QingStor文件存儲的接口協議部分可以完整支持POSIX語義接口,從而幫助企業零成本無縫對接企業內部各種應用系統。

在性能方面,QingStor文件存儲2.0版本通過兩個手段達成了性能提升的目標,一個是局部服務架構的優化,另一個則是通過更先進的程式語言助力。除了性能的進一步提升外, QingStor文件存儲2.0版本還帶來了一些新的企業級特性。比如,基於quota容量的限制、數據壓縮/加密功能等。需要強調的是,基於最初的架構設計原則,QingStor文件存儲新增的每一個特性都允許用戶根據業務實際需求,在單個租戶文件系統上獨立地選擇是否開啟(或調配)。另外,其監控告警服務也新增了更多維度,並且提供了配套的更出色的可視化體驗。

「無論從產品定位還是架構設計原則,我們所做的所有努力,都是旨在打造一款在雲計算基礎架構下更加通用的文件存儲產品,我們希望能通過這款產品幫助更多類型的應用更平滑上雲,享受到更好的雲計算基礎設施帶來的便利。」黃蒙表示。

相關焦點

  • 青雲科技分布式存儲全線升級,容量、性能飆升,100%自研
    (原標題:青雲科技分布式存儲全線升級,容量、性能飆升,100%自研)
  • 「青」心打造 為「雲」而生 青雲科技分布式存儲全線升級
    乘風破浪亦能不負眾望,在科技迭代迅速推進的當下,企業級存儲市場發生深刻變革的今天,青雲QingCloud (qingcloud.com)又是如何披荊斬棘、另闢蹊徑,將QingStor打造成為一款真正面向企業數位化全場景的存儲產品呢?
  • 青雲QingCloud分布式存儲全線升級:向雲而生的純自研存儲解決方案
    近幾年,企業級存儲市場上,正在經歷著重大的變化。一方面,分布式存儲正在經歷快速的增長時期。IDC 2019年市場預測報告顯示,無論是對象存儲、文件存儲還是塊存儲,在未來幾年裡都會保持兩位數高速增長。另一方面,IDC市場報告顯示,全快閃記憶體儲在所有採用存儲的企業裡,幾乎已經佔80%的使用率。全快閃記憶體儲逐漸成為主流。面對存儲市場的變化,各家雲廠商都在積極應對。
  • 青雲QingCloud:被低估的科創板新星
    目前青雲科技已擁有雲平臺、軟體定義存儲、超融合、SD-WAN智能廣域網、容器、多雲管理平臺、企業雲盤、多雲應用管理平臺、分布式資料庫、數位化辦公等系列產品,可實現統一架構的公有雲、私有雲、混合雲和託管雲交付和統一管理。
  • IPFS星際特工深度解析:被神化的區塊鏈和被低估的分布式存儲!
    區塊鏈不應該被正經創業者神化,不應該被科技騙子們工具化,也不應該被吃瓜群眾們妖魔化。 隨著5G時代悄然而至,整個網絡對於數據可靠性的要求正不斷提高,網際網路中心化存儲的弊端逐漸展現,分布式存儲已經成為了大勢所趨。 分布式存儲將成為數據時代的新未來,發展前景不可估量!
  • IPFS星際特工·第二分布式存儲數據中心正式完成建設
    作為區塊鏈分布式存儲領域的布道者和引領者,一直以來,星際特工技術團隊都在專注於區塊鏈分布式存儲技術軟硬體研發,並積極探索,勇於創新,精益求精,致力於把星際特工打造成區塊鏈分布式存儲領域世界一流品牌,以引領行業前沿。
  • ipfs正舵者總裁李衛宏參加「黑犇科技IPFS分布式存儲技術交流會...
    2020年7月17日下午,正舵者總裁李衛宏先生應上海黑犇科技邀請,參加了「黑犇科技IPFS分布式存儲技術交流會」,並在會上發表了「合作發展,共贏未來」的主題演講,演講全文如下:合作發展,共贏未來在這美好的季節,非常榮幸參加黑犇科技IPFS分布式存儲技術交流會,與各位專家、各位企業代表歡聚一堂,共話大數據分布式存儲的發展和未來。
  • 分布式數據存儲時代來臨,貓靈數據「贏」戰2020
    前言隨著網際網路時代的發展,包括網絡基礎設施和應用場景的豐富,網際網路所產生的數據呈現爆炸式的增長。海量數據的存儲給本地存儲帶來巨大壓力,中心化存儲系統不堪重負,幾乎到了崩潰的邊緣。基於此存儲商必須通過某種手段來分散存儲系統的壓力,於是分布式存儲和分布式文件系統應運而生。一、項目介紹貓靈數據(Morning Data)是一款功能強大且穩定的企業級路由器和數據機,同時還是一款面向家庭用戶的數據存儲設備,擁有8T的存儲空間,滿足個人和家庭用戶的使用。
  • 青雲QingCloud工業網際網路方案榮獲InfoQ十大雲原生技術方案獎 打造...
    青雲QingCloud早有布局和實踐,不僅領先行業實現「無限擴展、最小規模」交付和資源「秒級響應、按秒計費」,滿足不同行業企業業務場景的個性化算力需求,還基於「公、私、混、託」一體化架構,在產品開發、構建、測試等研發作業中實現全線、全流程雲原生,打造了KubeSphere容器平臺、QKE(QingCloud KubeSphere Engine)容器雲服務、OpenPitrix多雲應用管理平臺、AppCenter
  • AMA 主題:分布式存儲之星 —— 鏡像網絡MW
    虎符交易所是全球領先的加密貨幣交易所,支持多種數字加密貨幣交易。致力於發現優質的創新數字資產投資機會,通過搭建一流平臺及整合優質資產,為全球廣大數字資產愛好者提供安全高效的交易服務。 簡單介紹下鏡像網絡MW,鏡像網絡MW是區塊鏈這一新興領域的公有鏈技術項目,從技術選型準確來講,是區塊鏈+分布式存儲技術的融合,使用了區塊鏈、IPFS、OSS等技術組件,構建了一個易用、可用的分布式文件存儲網絡。
  • 熱點報導:「2020全球分布式存儲技術創新研討會」暨張家港分公司...
    開業典禮結束後,下午將迎來聲勢浩大的2020全球分布式存儲技術創新研討會,此次盛會業界大咖雲集,現場爆滿,引來各大媒體的爭相報導,以共享區塊鏈分布式存儲技術帶來的盛宴!隨後,凌發明先生對當下數字經濟及央行數字貨幣的推行也發表了看法,他表示:「當下,全球數字經濟發展已是大勢所趨。值得注意的是,在為人們生活提供便利的同時,數字經濟正在成為全球競爭的新賽道。在我國提出數字貨幣發展計劃並進行試點工作之後,美國、英國、法國、德國、日本等經濟體相繼出臺和頒布了多項數字經濟發展系列戰略規劃。
  • 分布式存儲下的塊存儲、對象存儲、文件存儲
    關於分布式存儲,定義上的東西,我們已經說過很多,所謂分布式存儲,它是一個存儲系統的底層體系。因為在5G時代下,社會的存儲需求呈幾何級增大,任何單一的伺服器所連接的物理介質和IO性能是無法獨立承擔的。所以,多臺伺服器的協作,一起為多個系統提供存儲服務需求應運而生,這就是分布式存儲系統。(中心化&分布式)為了滿足不同的市場需求,分布式存儲系統可以同時提供文件存儲、塊存儲和對象存儲這三種形式的服務。
  • 聚幣Jubi Labs Live|對話分布式存儲的未來-鏡像網絡MW
    Howard: MW是鏡像網絡中的內置加密數字通證,共計10億枚。主要用於激勵鏡像網絡構建的存儲生態,獎勵對鏡像網絡做出越多貢獻的角色,同時使用 MW token作為經濟懲罰的手段,避免惡意節點作惡和智能合約中可能出現的無限循環的邏輯炸彈等。
  • 入選InfoQ中國技術力量年度榜單 青雲QingCloud以雲原生強化工業...
    青雲QingCloud早有布局和實踐,不僅領先行業實現「無限擴展、最小規模」交付和資源「秒級響應、按秒計費」,滿足不同行業企業業務場景的個性化算力需求,還基於「公、私、混、託」一體化架構,在產品開發、構建、測試等研發作業中實現全線、全流程雲原生,打造了KubeSphere容器平臺、QKE(QingCloud KubeSphere Engine)容器雲服務、OpenPitrix多雲應用管理平臺、AppCenter
  • 憨猴科技"分布式運營系統"榮登世界網際網路大會
    憨猴科技——網際網路之光冬雨江南,七年踐行不變的「烏鎮時間」。2020年以「數字賦能共創未來攜手構建網絡空間命運共同體」為主題的世界網際網路大會·網際網路大會落下帷幕。憨猴科技"分布式運營系統"榮登世界網際網路大會,晉升新一代的「網際網路之光」。
  • 開源分布式圖資料庫研發商歐若數網獲近千萬美元PreA+輪融資
    11月16日消息,近日,新一代自主研發的開源分布式圖資料庫 Nebula Graph 研發商——杭州歐若數網科技有限公司(以下簡稱「歐若數網」)完成近千萬美元 Pre-A+ 輪融資。本輪融資由源碼資本領投,前兩輪分別領投的經緯中國和紅點創投 中國基金本輪繼續跟投。
  • 睿帆科技打好大數據產品組合拳,應對數字經濟「基本盤」
    數字經濟是重構經濟發展與治理模式的新型經濟形態,人類歷史已經全面進入數字經濟時代。根據CAICT的《中國數字經濟發展白皮書2020》,數字經濟進入「四化」協同發展新階段。其中數字產業化和產業數位化重塑生產力,是數字經濟發展的核心;數位化治理引領生產關係深刻變革,是數字經濟發展的保障;數據價值化重構生產要素體系,是數字經濟發展的基礎。
  • 歐若數網完成近千萬美元Pre-A+融資,打造開源分布式圖資料庫
    歐若數網創始人兼 CEO Sherman Ye 表示:「數據間的關聯關係將會是下一個重要的業務增長點,而快速挖掘數據背後的關聯價值便是提升業務價值的關鍵。國際知名諮詢機構 Gartner 發布的 2020 年十大科技趨勢預測中,關聯關係被認為是一切數據分析產生價值的基礎。
  • 數字經濟時代,企業在數位化轉型中需要思考什麼?
    馬雲在青年企業家峰會上說過,今天的世界面臨三個巨大無比的戰略性機會,一個是數字變革;二是中國強大的內需;三是新一輪的全球化開始。馬雲認為未來十年傳統行業的數位化非常確定,可見數位化已經成為這個社會勢不可擋的一次變革,疫情沒有改變這個趨勢,反而加速了這個趨勢。網際網路的數字經濟正在聚集強大的內需力量。
  • 當容器拍了拍存儲,讓你「想用又敢用」雲原生
    青雲QingCloud恰恰在容器平臺和分布式存儲上擁有業界領先的能力,因此也順勢打造出容器存儲一體機這樣的產品。"馮相東補充道。青雲QingCloud容器存儲一體機的優勢除了擁有'容器平臺+分布式存儲'能力外,還提供完善的服務保障能力,對包括容器、存儲等所有組件都有能力進行支撐。"據悉,為進一步加速容器存儲一體機的落地,青雲QingCloud將會採用直銷和渠道並舉的方式。馮相東介紹:"容器存儲一體機未來非常適合渠道去售賣。