華雲大咖說丨安超OS超融合系統技術細節(上)

2021-01-13 華雲數據

超融合架構經歷多年的技術發展,正逐步邁入規模落地階段。如今,超融合已經成為企業數位化轉型背後的重要力量,廣泛應用於數據中心核心業務的承載。隨著被越來越多的用戶所接受,超融合被認為是未來 IT 基礎架構的發展趨勢。

華雲數據作為中國雲計算獨角獸,為了更好地滿足用戶需求,通過自主研發於2019年推出了安超OS。為了能讓用戶快速了解安超OS超融合系統的技術特點,本期大咖說,華雲數據資深解決方案工程師桂燾分為兩期內容,為大家帶來「安超OS超融合系統技術細節」,對華雲數據安超OS超融合系統的核心組件和各組件功能特點等技術細節,進行詳細介紹。

精彩觀點

1. 超融合是以軟體定義為中心的IT基礎架構,HCI將計算、網絡、存儲等資源集成在標準的 X86 硬體中。HCI 包含的最小集合是:虛擬化計算(Hypervisor),虛擬存儲(SDS)和虛擬網絡。

2. 安超OS的設計理念遵循軟體定義是基礎,分布式存儲是核心,架構簡化是目的,致力於打造一個能夠為企業提供高性能、高可用、高效率及易於安裝維護的IT基礎設施平臺,加速政府和企業上雲的進程,為推動企業數位化轉型提供完整的一站式企業上雲的雲作業系統平臺和生態解決方案。

3. 安超系統架構:(1)安超OS部署在每個節點上,與VMware或KVM的Hypervisor緊密結合。(2)安超OS在每個伺服器上部署一個CVM(存儲控制虛擬機或容器),通過該CVM將所有節點的本地存儲聚合成一個統一管理的虛擬化存儲池(Global Namespace);(3)在底層,安超OS利用內存和SSD作為數據的高速緩存,實現動態的數據分層,將存儲池分為緩存池(Performance Tier)和容量池(Capacity Tier);(4)在上層,安超OS為不同類型的應用,提供基於策略的性能優化和高可用性設置,實現安超集群內多種應用負載的支撐能力;(5)所有節點上的CVM通過高速乙太網(萬兆乙太網),管理和控制各節點間的數據傳輸和通訊。

4. 安超OS是一款橫向擴展的軟體集成基礎架構系統,採用通用的X86伺服器,不與其他節點共享CPU、內存、本地磁碟等組件;支持供應商和組件的異構性;可以提供快照、克隆、數據壓縮、存儲分層等原來由專有的企業級存儲系統提供功能,同時也可以按需單獨擴展存儲節點(存儲能力),或者只擴展計算節點(計算能力)。

5. 安超OS核心模塊功能包括:文件系統、對象管理器、NFS管理、集群仲裁管理、節點管理、ArIL(Intent Log)&讀緩存。

6. 安超文件系統採用自研的、可伸縮的、具備彈性的分布式文件系統(ArFS),提供企業級共享存儲服務。同時,通過跨集群的實例間同步操作來消除腦裂。此外,還能夠在集群中的每臺伺服器上運行管理實例,提供高可用和可伸縮的全局命名空間。

7. ArFS的讀I/O路徑:通過最靠近Guest虛擬機的本地存儲管理實例(ArSP)處理寫 I/O;數據條帶化儘可能寬,並創建數據副本。數據及其副本通過網絡,寫入至少兩個不同節點快閃記憶體介質上的ArIL;每個節點都確認數據已寫入快閃記憶體介質;在將所有數據(包括副本)寫入快閃記憶體後,寫 I/O 確認信息返回給應用程式VM;數據最終會寫入HDD。

8. 寫操作超時時的處理:(1) 通過最靠近Guest虛擬機的本地存儲管理實例(ArSP)處理寫 I/O;(2)數據及其副本通過網絡寫入至少兩個不同節點快閃記憶體介質上的ArIL;(3) 某個節點數據寫入快閃記憶體介質超時(8s),此節點被標記為STALE;(4)其他節點上數據(包括副本)寫入快閃記憶體後,寫 I/O 確認信息返回給應用程式VM;(5)當被標記為STALE的節點恢復後,數據將被更新同步到該節點,並最終會寫入HDD。

9. 主控制器隨VM浮動時的I/O路徑:(1)傳統的存儲系統以伺服器-客戶端的方式,維護所有 VM 的主控制器,該控制器有可能成為 IO 流量的瓶頸;(2)安超允許主控制器的角色在節點間傳遞,並為每個 VM 維護一個主控制器;(3)當 VM 在節點間遷移時,這種主控制浮動或遷移的機制,可以消除不必要的網絡訪問流量,從而達到改進IO性能的目的。

10. 安超OS能夠提供端到端的數據完整性保護,在不需要對硬體配置進行改變的條件下,安超OS提供的數據完整保護機制可以避免靜默數據損壞。並利用強校驗,讓校驗不僅在讀取塊時進行,在數據存取時也進行驗證,這個驗證過程覆蓋ArIL、讀取緩存、Metadev、HDD 以及所有跨網絡的數據傳輸。最重要的是,安超不僅校驗數據塊自身,同時也校驗數據塊中的數據,當數據塊或數據驗證失敗時,安超可以通過可用副本中的正確數據對損壞的數據塊或數據進行自我修復。

相關焦點

  • 華雲大咖說丨安超助力智慧校園建設
    從目前來看,促進雲計算、大數據、物聯網等新一代信息技術和智能技術深度融入教育教學和管理服務全過程,助力教育教學、管理和服務的改革發展,這不僅是推進智慧校園建設的關鍵路徑和有力支撐,也是《教育信息化2.0行動計劃》明確提出的發展方向。本期大咖說,邀請到華雲數據資深售前解決方案工程師張曉宇為大家帶來「安超助力智慧校園建設」。
  • 華雲大咖說丨安超助力智慧校園建設
    從目前來看,促進雲計算、大數據、物聯網等新一代信息技術和智能技術深度融入教育教學和管理服務全過程,助力教育教學、管理和服務的改革發展,這不僅是推進智慧校園建設的關鍵路徑和有力支撐,也是《教育信息化2.0行動計劃》明確提出的發展方向。本期大咖說,邀請到華雲數據資深售前解決方案工程師張曉宇為大家帶來「安超助力智慧校園建設」。精彩觀點1.
  • 華雲大咖說丨安超虛擬化平臺介紹
    本期大咖說,邀請到華雲數據產品營銷經理張開亮為大家帶來「安超虛擬化平臺介紹」。安超虛擬化平臺是擁有自主智慧財產權的虛擬化平臺,支持多芯多棧的伺服器架構,通過整合數據中心的IT基礎資源,為企業數位化轉型提供更敏捷、更高效的軟體定義數據中心。
  • 華雲大咖說丨vSAN實踐淺談分享
    華雲數據在多年的vSAN交付與支持過程中,積累了豐富的經驗,同時結合華雲數據自身的研發能力,推出了安超OS-V版超融合產品,可以有效的幫助企業從傳統IT架構向超融合架構過渡,幫助企業加快數位化轉型。本期華雲大咖說,特別邀請到華雲數據架構師高嵩帶來「vSAN實踐淺談分享」,助力企業高質量發展。精彩觀點1.
  • 華雲大咖說|企業級統一存儲解決方案
    首頁 > 傳媒 > 關鍵詞 > 華雲最新資訊 > 正文 華雲大咖說|企業級統一存儲解決方案
  • 華雲大咖說丨疫情後時代教育解決方案分享
    在這一輪教育現代化進程中,利用雲計算、大數據、人工智慧等新一代信息技術「倒逼」教育改革和發展,不僅成為加快教育現代化的有效途徑,也成為教育制度創新的重要契機。本期大咖說,邀請到華雲數據資深雲架構師張偉為大家帶來「疫情後時代教育解決方案分享」。
  • 國際權威分析機構Gartner發布2020超融合魔力象限 華雲數據連續...
    2020年,全球共有10家IT服務商入圍,中國獨立雲服務提供商華雲數據憑藉其技術前瞻性和安超OS的廣泛的客戶應用連續第二年進入了Gartner超融合魔力象限。  Gartner認為,華雲數據能夠進入到2020年度超融合軟體魔力象限緣於其產品的以下優勢:  華雲數據超融合解決方案的在價格和報價體系上有優勢,對於價格敏感的客戶(尤其是新興市場買家)非常有吸引力。  華雲數據可以提供一個雙節點集群的高可用解決方案。
  • 華雲大咖說丨華雲數據與統信軟體攜手共建國產雲生態
    本期華雲大咖說,邀請到了統信軟體生態技術總監牛戰爭、華雲數據資深售前方案經理屈崇凱,共同暢談華雲數據與統信軟體在產品兼容適配、互認證等方面的合作,探討國產化產業生態的發展。2.安超OS是一款具有應用創新特性的國產通用型雲作業系統,開創國內敏捷上雲之技術先河,依託眾多業界領先專利技術,提供包含作業系統、計算虛擬化、存儲虛擬化、雲管平臺、雲工作負載的遷移與自動化部署、應用商店等全棧功能,並擁有強大的全球生態整合能力。華雲數據作為中國雲計算獨角獸,近年來一直在完善產業鏈生態,與眾多合作夥伴共建雲計算生態圈。
  • 華雲大咖說:企業級統一存儲解決方案
    隨著技術的發展,分布式存儲採用可擴展的系統結構,更加易於擴展和管理,其成本低、硬體靈活度高以及可快速集成等特點,對於正在經歷數位化轉型的企業來說非常重要,越來越受到不同行業用戶的青睞,已被逐步應用於大規模數據應用的場景中。
  • 《中國超融合產品市場研究報告》發布 華雲數據穩居領導者位置
    由於超融合架構在標準的x86伺服器上通過軟體定義實現了計算和存儲資源的融合,簡化了IT基礎架構;同時,其核心分布式塊存儲技術可以基於x86伺服器構建易擴展的存儲資源池,這些優點使得越來越多的企業選擇了超融合架構,從而導致超融合市場快速增長。計世資訊統計,2019年超融合市場規模達77.4億元,增速高達52.4%。
  • 《2019-2020年中國超融合產品市場研究報告》發布 華雲數據穩居...
    由於超融合架構在標準的x86伺服器上通過軟體定義實現了計算和存儲資源的融合,簡化了IT基礎架構;同時,其核心分布式塊存儲技術可以基於x86伺服器構建易擴展的存儲資源池,這些優點使得越來越多的企業選擇了超融合架構,從而導致超融合市場快速增長。計世資訊統計,2019年超融合市場規模達77.4億元,增速高達52.4%。近三年,隨著市場規模基數的增長,增速趨於放緩,但仍以較高的速度增長。
  • 華雲大咖說|華雲在線教學實訓科研平臺解決方案分享
    本期華雲大咖說,特別邀請到華雲數據資深雲架構師張偉帶來"華雲在線教學實訓科研平臺解決方案分享",全面實現停課不停教、停課不停學,提高學校應對突發重大公共衛生事件的能力和水平,推進教育系統治理體系和治理能力現代化,努力實現2020年教育改革發展目標任務。精彩觀點1.
  • 華雲數據桌面雲解決方案
    作為雲計算的一個典型應用,雲桌面正在以其靈活訪問、簡化管理、數據安全、綠色節能等優勢應用於教育、能源、運營商、專網、大商業等諸多領域和行業。為了能讓用戶充分了解和用好雲桌面,本期大咖說,邀請到華雲數據售前解決方案部解決方案工程師趙勇為大家帶來「華雲數據桌面雲解決方案」,探討雲桌面的常見問題。
  • 華雲數據獲評「蘇南國家自主創新示範區獨角獸企業」
    經過各市自創區建設工作領導小組辦公室推薦、嚴格評審流程,華雲數據憑藉在雲計算領域領先的技術優勢當選,於12月8日正式獲評「蘇南國家自主創新示範區獨角獸企業」。近十年來,華雲數據堅持自主研發,獲得了500多項智慧財產權,在私有雲、混合雲、公有雲和超融合領域均通過了可信雲評估,獲得了軟體能力成熟度模型集成CMMI5證書,擁有國家保密局甲級資質,被列入國家課題承接單位。
  • 華雲數據參加「2020通明湖信息技術應用創新論壇」
    本屆論壇以「融合發展,信創未來」為主題,十二屆全國政協副主席、國家電子政務專家委員會主任王欽敏,工業和信息化部副部長王志軍,北京市市委常委、副市長殷勇出席並致辭,相關主管部門領導、院士專家、用戶代表、產業鏈上下遊各方代表共千餘人參會。華雲數據作為信創工委會重要成員、信創產業發展引領者受邀出席本次大會,並攜安超OS、智能辦公雲平臺等信創產品亮相展覽現場,暢談「信創雲基座」賦能數字新基建。
  • 華雲數據發布雙技術棧企業級超融合產品線
    【PConline 資訊】近日,華雲數據發布了自主智慧財產權H2CI和VMware雙技術棧的企業級超融合產品戰略。華雲數據作為中國私有雲領導者、混合雲實踐者,憑藉長期為企業級用戶服務的經驗,推出搭載自研超融合系統H2CIUltra的企業級超融合產品H2CI,助力企業輕鬆構建開箱即雲的數據中心。
  • 背後的力量|華雲數據助力寶通科技實現數位化轉型
    隨著網際網路、雲計算、大數據、人工智慧與實體經濟的深度融合,數位化對傳統產業轉型升級提供了新動能。從目前來看,科技是提升產業數位化時代生產力的重要手段,企業的業務創新只有依靠科技手段才能夠快速磨合、快速響應,從而提升自身競爭力,有效地在市場中佔據有利地位。
  • 華雲數據:推進信創生態建設 撐起中國雲創新的明天
    多年來,致力於中國政企用戶上雲背後力量的華雲數據,堅持技術自主研發,不斷突破創新,取得了斐然成績。如今的華雲數據已連續四年被評為中國雲計算、大數據領域獨角獸企業,多次榮登國內、外調研機構發布的私有雲及超融合領導者象限,並得到了越來越多行業用戶的信賴與認可。
  • 華雲數據收購超融合廠商Maxta,開創科技併購先河
    事實上,從IDC公布的數據可以看出,全球超融合市場近年來不斷增長,規模已經與傳統融合系統市場份額相當,以目前的增長速度,未來超過融合系統幾無懸念。以中國市場為例,IDC最新數據顯示,中國超融合軟體市場僅僅在2018年第三季度就實現了136.4%的同比增長,未來市場空間之大可見一斑。
  • .| 華雲數據與永中軟體完成產品兼容互認證 攜手推出「智能數字...
    日前,華雲數據的國產通用型雲作業系統安超OS 2020與永中軟體的永中FT雲辦公平臺完成產品兼容性互認證。本次兼容性互認證經華雲數據與永中軟體聯合測試得出:產品相互兼容,整體運行穩定、性能卓越。