以分布式融合技術為突破口,易鯨捷奏響國產資料庫「衝鋒號」

2020-12-09 數位化企業

作為全球最早推出下一代融合型分布式資料庫的國產資料庫廠商,易鯨捷一直以來都做到完全自主可控,具備核心技術底層架構的全面控制為目標。

如今,數據量正迎來爆發式增長,這也使企業越來越重視數據的存儲、安全和管理,加大IT基礎設施建設。作為其中的關鍵基礎設施,資料庫的安全可控也逐漸引起了企業的重視,特別是在國際市場競爭日益複雜的今天,國產資料庫也邁入了新的發展階段。

作為全球最早推出下一代融合型分布式資料庫的國產資料庫廠商,易鯨捷一直以來都以做到完全自主可控,具備核心技術底層架構的全面控制為目標。在日前舉辦的2020數據技術嘉年華上,易鯨捷金融事業部售前總監隋景鵬在《用戶實踐:金融科技技術實踐》分論壇上分享了國產資料庫的發展歷程和易鯨捷分布式融合技術特點,以及易鯨捷在貴陽農商銀行核心交易系統的最佳實踐。在隋景鵬看來:「國產資料庫技術要有所突破,不能一直跟在別人後面,必須走一條完全創新的道路。易鯨捷資料庫以分布式融合技術為突破口,不僅實現了高並發下的數據快速實時分析,還可以滿足多種數據處理技術深度集成,讓資料庫資源更為充分和靈活使用。」



圖 易鯨捷金融事業部售前總監隋景鵬

以分布式融合技術推動國產資料庫發展

我們知道資料庫一直以來與作業系統、中間件共同構成基礎軟體的「三架馬車」。在過去的二十多年的時間裡,國內資料庫企業與Oracle(甲骨文)等國外一流企業相比,普遍存在營業規模小、客戶認可度低、產品相對落後、人才稀缺等諸多問題,因此一直處於向國外模仿學習階段。然而,近年來國際市場的不確定性增加和企業對網絡安全的重視度提升下,國產資料庫迎來了發展春天,許多國內廠商也大舉進軍資料庫市場。根據賽迪顧問的數據顯示,2019年中國資料庫市場規模達到133.4億,同比增長13.4%,預計未來3年也將保持15%左右的增長速率。



圖 資料庫歷史和發展趨勢

「易鯨捷也是其中之一。」隋景鵬介紹易鯨捷信息技術有限公司成立於2015年,是貴州大數據綜合試驗區致力於資料庫研發的重點企業,貴州各級政府投資佔股約23%,屬於混合所有制。其中核心研發人員是來自惠普的整建制大數據研發團隊,曾創建、參與研發了NonStop SQL、Neoview、SeaQuest等先進的資料庫產品,是國內少有的具備資料庫核心模塊研發能力的資料庫廠商。

與普遍基於開源的MySQL或PostgreSQL來開發國產資料庫不同,易鯨捷團隊通過自主研發,實現了原生完全扁平化的分布式資料庫計算引擎,做到完全自主可控與屬地管轄,具備核心技術底層架構的全面控制與調整能力。這種自主創新能力也得到了Apache軟體基金會的認可,2018年1月,由易鯨捷研發團隊貢獻的開源資料庫Trafodion在Apache社區成功畢業成為頂級項目,被認為是一款具備高並發事務處理能力的分布式資料庫。

所謂分布式融合技術,其特點是既可以應用於事務型資料庫場景,亦可以應用於分析型資料庫場景,這種架構具有顯而易見的優勢:不但避免了繁瑣的ETL操作,而且可以更快地對最新數據進行分析。「無論是高並發的交易處理,還是海量數據分析業務,用戶都可以通過一種資料庫架構提供支撐。易鯨捷的「智能優化器」自動識別不同類型的SQL,分配合適的執行策略,保證任何業務都能快速、高效的進行響應。同時通過事務管理器與資源管理器配合,保證事務的一致性,不同用戶之間的計算任務資源隔離。」隋景鵬解釋道。



圖 易鯨捷資料庫技術架構圖

六大特點助力用戶實現數位化轉型

隋景鵬介紹目前易鯨捷提供EsgynDB和QianBase兩種資料庫產品。作為企業基礎版資料庫,EsgynDB可以在單個資料庫平臺上同時支撐OLTP和OLAP業務,減少當前企業面臨混搭架構中大量數據的移動和複製,降低因此產生的延遲、故障和運營成本,同時還能滿足結構化、半結構化、非結構化數據的處理,並能做到將經營數據進行實時的分析,提升大數據分析的價值。

而QianBase則是專門針對金融行業需求推出的。隋景鵬介紹在行動支付和全客戶體驗的刺激下,銀行業務應用正在快速迭代,而傳統資料庫架構陳舊,橫向擴展能力不足,無法滿足未來大數據量的業務性能需求,限制了銀行的業務發展能力。對此,易鯨捷對事務能力增強,支撐銀行最關鍵的核心交易系統。此外,易鯨捷還首創了雙庫並行技術,將從銀行前端的櫃面交易、支付平臺到核心交易的完整核心系統,並行在易鯨捷資料庫與甲骨文之上,互為災備可秒級互相切換,消除傳統銀行對於國產資料庫運行穩定性的顧慮。

這裡,隋景鵬總結易鯨捷分布式資料庫主要包含以下六大特點:

原生:易鯨捷分布式資料庫完全自主研發,計算引擎不依賴Mysql、PostgreSQL等任何開源技術。其扁平化架構無需配置單獨的管理節點、事務節點,支持無限擴展,不存在性能瓶頸,內部負載均衡,無需LVS/F5等。

融合:易鯨捷具備HTAP四合一融合能力,應用僅需連接一個計算引擎,即獲得核心交易、分析查詢、大數據,以及影像數據存儲能力,去除傳統IT架構中資料庫軟體能力對業務功能的限制。

透明:數據分布透明,無需用戶設置複雜的數據分布策略,減少人為操作造成的性能影響,採用分布式架構實現技術創新、思維創新,無需維護複雜的分區表,降低開發、運維工作量。

安全:支持跨機櫃故障容錯,並行備份支持基於時間點的恢復,數據全局一致性。同城雙活兩中心雙寫雙讀,RPO為0,支持異步複製、兩地三中心災備。

易用:易鯨捷提供一鍵遷移工具與可視化運維管理工具。兼容Oracle語法支持標準SQL92/99、2003 OLAP分析函數,兼容90%以上的Oracle 操作語法。

生態:易鯨捷已經與眾多金融行業軟硬體供應商完成了深度的產品適配,包括櫃面渠道、前置、核心交易、後置、歷史數據查詢、審計、風控、數倉、BI、影像存儲、數位化管理與普惠金融等眾多的業務場景,貫通上下遊廠商,提供全棧信創一體化的解決方案,方便快速部署實施。

持續創新,貴陽銀行等多領域打造最佳實踐

目前,易鯨捷已經成功進入金融、電信、能源、網際網路等重要行業,提供資料庫技術支撐服,被金融、智能製造、電信等領域的眾多國際巨頭所採納,例如美國最大金融財團的風控和合規系統、中國聯通的運營商業務支撐系統、中國移動大數據系統、貴陽銀行核心交易系統等,在資料庫領域數據量最大、業務類型最複雜、穩定性要求最高的場景中證明了易鯨捷的技術實力。

特別是在貴陽銀行核心交易系統上,隋景鵬介紹易鯨捷以QianBase為支撐,首先構建新核心「沙箱」系統,開發報文轉換器,將核心系統報文同步到新核心,100%並行執行現有銀行核心業務,進而驗證易鯨捷分布式資料庫在銀行核心交易系統穩定性、準確性、性能是否達標。貴陽銀行「沙箱」系統自4月份上線至今,系統表現優異,穩定運行超過250天,聯機交易成功率達到99.999%,準確率100%,部分性能甚至超過現有核心業務系統,獲得客戶的高度評價。在隋景鵬看來,項目的成功上線驗證了國產資料庫在核心系統應用的技術可行性,解決國家十餘年來無法在銀行、運營商核心交易系統中實現安全可靠的技術難題,為國家關鍵技術安全可控戰略提供有力支撐。

目前,數據技術正在逐步成為驅動企業進步的核心動力,國產資料庫更受矚目。易鯨捷也在加快與國產主流晶片、作業系統、伺服器的合作,夯實信創全生態,例如前不久易鯨捷加入中國聯通5G聯盟,與諸多合作夥伴共建5G生態及相關應用創新。「未來,易鯨捷將始終堅持自主創新,與生態夥伴共同服務客戶,助力國產資料庫蓬勃發展,為國家關鍵核心技術的自主可控貢獻自己的一份力量。」隋景鵬總結道。

相關焦點

  • 分布式資料庫領軍企業易鯨捷再獲物聯網行業大單
    近日,貴州易鯨捷信息技術有限公司獨家中標中移物聯網有限公司OneLink平臺四期工程項目(融合分布式資料庫)。此次易鯨捷中標的OneLink平臺四期工程項目將使用易鯨捷EsgynDB資料庫替換原有Oracle資料庫,為中移物聯網公司解決物聯網場景下海量數據實時入庫、實時計算、實時分析、實時查詢的應用需求。該項目也是易鯨捷HTAP融合型分布式資料庫EsgynDB最適合的應用場景之一。
  • 英方攜手易鯨捷助力貴陽銀行核心業務系統國產資料庫應用
    近期,英方軟體成功中標貴陽銀行股份有限公司核心業務系統易鯨捷國產資料庫應用項目中資料庫同步和容災管理平臺項目,為貴陽銀行易鯨捷國產資料庫提供數據實時同步、統一容災管理服務。英方憑藉出色的資料庫數據同步技術參與此次貴陽銀行易鯨捷國產化資料庫替換項目當中。
  • 易鯨捷資料庫在高並發物聯網場景中的應用
    易鯨捷作為業界大數據領域全能的SQL資料庫,支持各種數據類型,包括結構化、半結構化、非結構化數據。易擴展的分布式架構,通過添加節點能夠輕鬆支持物聯網場景中千萬終端設備採集的海量數據。什麼是物聯網技術以及典型場景?
  • 鯤鵬展翅守衛「雲上金庫」, 易鯨捷開創資料庫新紀元
    分布式融合技術 易鯨捷開創金融行業資料庫發展新紀元來自大數據之城貴州的本土高新技術企業———易鯨捷,易鯨捷創造性地將經過數十年打磨的SQL引擎架在Hadoop架構之上,讓客戶可以通過SQL語句使用大數據標杆架構,解決了傳統資料庫的升級難題。
  • 鯤鵬展翅守衛 「雲上金庫」, 易鯨捷開創資料庫新紀元
    線上交易的普及,在為人們提供便利性服務的同時,也對金融行業提出了更高的挑戰。高頻交易下傳統資料庫面臨升級挑戰傳統的金融行業,業務場景大多由人做主導。通過合理的預約辦理機制能夠保障核心資料庫的穩定運行,信息的提取也相對有序化。在移動網際網路普及後,隨著交易場景的複雜化、即時化,日漸龐大的數據量對傳統數據提出了新的需求。
  • 易鯨捷錢庫金融資料庫銀行核心交易系統落地分享及新版發布
    5月29日,在2020「數博發布」活動中,貴州易鯨捷信息技術有限公司在線發布了錢庫金融資料庫的最新版,並就易鯨捷如何在銀行核心交易系統落地國產分布式資料庫情況進行了分享。本次發布的新版是對之前版本性能進行優化後的最新版融合型分布式國產資料庫。
  • 易鯨捷的冷熱數據智能管理技術
    易鯨捷開發的冷熱數據異構介質存儲智能管理技術,可以支持冷熱數據在同一套資料庫中使用不同的介質存儲,針對熱數據使用行式存儲格式高速加載,針對冷數據使用列式存儲對海量歷史數據進行快速分析。易鯨捷的冷熱數據管理技術針對傳統解決方案的限制,易鯨捷開發了冷熱數據異構介質存儲智能管理技術。此技術可以支持冷熱數據在同一套資料庫中使用不同的介質存儲,針對熱數據使用行式存儲格式高速加載,針對冷數據使用列式存儲對海量歷史數據進行快速分析。
  • 國產資料庫技術如何實現「去O」
    在這點上, Oracle這種「單機/共享存儲/讀寫分離」架構其實也有些力不從心,這也是國產資料庫為什麼大都選擇分布式架構的原因。以此為參考,我們去衡量一個什麼樣架構的資料庫才能去O!這樣,一個業務系統的數據就分布在多個庫、多個表中存儲,一個業務系統,由多個資料庫來共同支撐。很多國產資料庫廠商就是這樣,以MySQL資料庫為核心基礎,通過「分庫分表」的解決方案打包成一個完整產品,大量的網際網路企業、科技巨頭,都是這樣去做的(此時,我們暫且忽視他們使用Mysql的風險,僅評估他的技術方案是否可行)。
  • 國產分布式資料庫怎麼選?我做了三張表!(一)
    本篇為選題系列文章第一篇:產品布局篇科技無國界,被證明就是一個笑話!晶片、作業系統、資料庫是現代信息技術領域的三大核心基礎,今天,運行的絕大多數企業應用軟體都離不開資料庫的支持。相比晶片、作業系統,資料庫是公認最有希望實現彎道超車的,無論是從技術還是市場維度看,都是如此。(傳送門:聊新基建、信創,資料庫不能少!)
  • 2020年度IT168技術卓越獎名單:資料庫類
    架構改造,運行在分布式資料庫OceanBase之上,10月,易鯨捷4.27億元中標貴陽銀行核心業務系統,替換Oracle,震驚四座,這是國產資料庫又一裡程碑事件,這樣的例子還有很多。,今年以 7.07億 tpmC 的在線事務處理性能,打破了 OceanBase 自己在 2019 年創造的 6088萬 tpmC 的 TPC-C 世界紀錄,再次向世界證明了國產自研分布式資料庫的高性能與高可用。
  • 英方軟體與易鯨捷完成產品兼容性互認證
    近日,上海英方軟體股份有限公司與易鯨捷信息技術有限公司完成產品兼容性認證工作。此次,英方軟體與易鯨捷錢庫金融資料庫軟體 QianBase V1 互認證的軟體為:英方數據流複製管理軟體 i2Stream 、高可用災備管理軟體 i2Availability 、統一數據管理平臺軟體 i2UP。
  • 易鯨捷與平安科技籤署戰略合作協議,打造金融科技新標杆
    近日,貴州易鯨捷信息技術有限公司與平安科技(深圳)有限公司籤署戰略合作協議,雙方將基於各自技術優勢及行業資源開展金融科技生態建設深度合作,為加速金融行業數位化轉型,促進金融生態全場景創新發展夯實技術與實踐基礎。
  • 易鯨捷與平安科技籤署戰略合作協議,打造金融科技新標杆,樹立信創...
    近日,貴州易鯨捷信息技術有限公司與平安科技(深圳)有限公司籤署戰略合作協議,雙方將基於各自技術優勢及行業資源開展金融科技生態建設深度合作,為加速金融行業數位化轉型,促進金融生態全場景創新發展夯實技術與實踐基礎。
  • 國產資料庫!
    ,獲得了非常好的市場影響力,而今年在 5月20日發布的,再次超越自己的世界記錄,引發的增長則尚未體現,但是憑藉兩次 TPCC 打榜成功,OceanBase成功躋身國產資料庫一流影響力陣列,據悉 OceanBase 的獨立公司即將設立,深耕資料庫市場,相信會為 OB 帶來新一輪的市場影響力增長;達夢資料庫
  • 2020,國產資料庫嶄露崢嶸的發軔之年
    根據個人的視角,我將國產資料庫劃分為四個流派,分別是: 1.創業派:資料庫領域生機勃發的另外一支力量是新興的獨立資料庫創業企業,由於行業的未來引人矚目,資本開始青睞這個行業,技術創業者和資本的結合,催生了一系列的新興資料庫企業,這其中包括巨杉、PingCAP、偶數、星環、柏睿、、星瑞格、易鯨捷等。
  • 騰訊雲資料庫品牌升級「企業級分布式資料庫TDSQL」引領技術前沿
    12月24日,騰訊雲正式宣布其資料庫品牌TDSQL的全新戰略升級計劃及未來發展戰略。未來,騰訊雲原有的TDSQL、TBase、CynosDB三大產品線將統一升級為「騰訊雲企業級分布式資料庫TDSQL」。全新升級後的騰訊雲TDSQL將涵蓋分布式、分析型、雲原生等多引擎融合的完整資料庫產品體系。
  • 2020資料庫行業大事件盤點和2020數據技術嘉年華集結號
    月1日,易鯨捷EsgynDB在貴陽銀行核心交易系統率先成功上線。9月25日,中國工商銀行開始採用螞蟻集團自研資料庫OceanBase,其對公(法人)理財系統已完成從大型主機到OceanBase分布式架構的改造。
  • 引領數據創新,星環分布式資料庫KunDB亮相數據技術嘉年華
    2020年11月20-21日,一年一度的數據技術嘉年華在北京順利召開,此次大會以「自研·智能·新基建——雲和數據促創新 生態融合新十年」為主題,打造 「開源自研、智能運維、智能自治、新基建、用戶實踐」五大模塊,設置1個主會場、12個分會場,匯聚學術精英、資料庫技術大咖、數據行業專家、網際網路卓越產品,帶來超過60場主題演講。
  • 大型機下移,國產分布式資料庫上線,金融機構技術安全可控邁出關鍵...
    黨的十九屆五中全會上提出「把科技自立自強作為國家發展的戰略支撐」的聲音剛落,大型銀行資料庫國產化即傳來好消息。10月30日凌晨5時,平安銀行正式對外宣告平安銀行信用卡「A+」新核心系統成功完成切換投產,這意味著平安銀行信用卡核心系統從IBM Z系列大型機架構,轉向國產分布式系統遷移全面完成,實現核心銀行系統在國產自研分布式資料庫上的成功生產運行。
  • 騰訊雲攜手長亮科技,國產分布式「資料庫+核心應用」落地崑山農商...
    為了保證核心系統穩定性和高可用性,銀行多採用集中式資料庫來承載核心系統。但隨著金融創新節奏的加快,網際網路場景與金融的進一步融合,以及行業對安全可控訴求的進一步提升,傳統集中式的資料庫的瓶頸逐漸顯現。崑山農商銀行在新一代核心系統建設中,充分考慮業務發展的中長期需求,選擇長亮科技與騰訊雲提供的 「微服務單元化架構核心系統+分布式資料庫」的組合,支撐業務安全、高效、穩定運行。