比Postgre快10倍的開源資料庫CrateDB

2021-01-08 資料庫運維

一張擁有20多個欄位的表,記錄大約有3億條,需要查詢某個時間範圍內的數據,並做分組,排序,聚合統計操作,並需要即時響應結果,大家看到這個需求,一定深有體會,傳統的關係型資料庫不能滿足需求,肯定能想到的方案是hbase,ElasticSearch了,hbase方案稍微有點重,ElasticSearch又對sql支持不太好,那有沒有既對sql支持,響應速度又快的開源產品呢,CrateDB就滿足上述的需求。

下面就能介紹一下今天的主角CrateDB,先看看CrateDB都有什麼功能特性

CrateDB它是以ElasticSearch為基礎進行開發,支持標準sql的分布式資料庫,所以它天然支持自動分片,自動複製,分布式的nosql架構,並且安裝非常簡單,能存儲結構化和非結構化的數據。

底層有ElasticSearch的高性能搜尋引擎,上層有標準sql支持組件,你的應用肯定會跑得飛起,下面就用實際例子來做一下性能對比,看看CrateDB有多彪悍

從圖中可以看到,3.14億數據,不管做範圍查詢,排查,分組,聚會操作,CrateDB都表現出優越的性能,基本都是在2秒返回結果。比PostGre快6倍以上。

CrateDB非常適合用於日誌數據分析,例如用戶安全和反欺詐,性能監控數據,各種緯度的分析與查詢

但是CrateDB不適合強事物的場景,喜歡的同學可以嘗試一下。

相關焦點

  • 阿里開源otter:分布式資料庫同步系統
    【IT168 資訊】阿里巴巴一向熱衷於開源。從風風火火的去IOE運動,到阿里在GitHub中託管的60個開源項目,都可以看到他們開源的決心。本周一(8月19日),阿里巴巴宣布開源分布式資料庫同步系統otter。
  • 11 個開源的面向文檔資料庫
    面向文檔的資料庫主要設計用來存儲、獲取以及管理基於文檔的或者叫半結構化的數據。也屬於 NoSQL 資料庫的一種類別。
  • TBase資料庫開源後首次升級,複雜查詢性能提升十倍
    【環球網科技綜合報導】7月13日,騰訊雲自研分布式HTAP資料庫TBase正式發布最新開源版本,該版本在多活分布式能力、性能、安全性、可維護性等多個關鍵領域得到全面的增強和升級,複雜查詢的性能提升十倍以上。
  • 百度安全開源大規模圖資料庫HugeGraph
    圖資料庫在安全反欺詐、知識圖譜、機器學習等諸多領域有著重要的應用,但TitanDB團隊被DataStax收購之後,開源圖資料庫出現了斷層
  • 騰訊雲成為MariaDB基金會白金會員,成全球資料庫開源中堅力量
    騰訊雲將輸出騰訊在MariaDB資料庫上的經驗和技術。程彬負責騰訊雲資料庫CDB以及內核TXSQL的研發,專注於資料庫和分布式存儲領域相關技術和產品。他將代表騰訊雲的資料庫團隊參加基金會每周的技術會議,提供MariaDB資料庫的意見和建議,並在內部推動騰訊雲MariaDB的開源進程,推動MariaDB在中國的開源工作。
  • 騰訊雲開源資料庫TBase迎來首次升級,複雜查詢的性能提升十倍以上
    2019年11月,騰訊宣布正式對外開源分布式資料庫TBase,受到資料庫界的廣泛關注,如今這款分布式資料庫迎來了開源後的首次升級。7月13日消息,騰訊雲自研分布式HTAP資料庫TBase正式發布最新開源版本。
  • 蘋果重新開源分布式資料庫FoundationDB,已在內部使用三年
    但這在當時引發了開源社區的不滿,開源生態的開發者和參與者紛紛對商業收購開源項目的行為表示擔憂和不安,認為這樣對於開源項目的貢獻者和參與者來說加大了風險,甚至對開源項目本身也是一種傷害甚至扼殺。就在今天凌晨,蘋果宣布 FoundationDB 分布式資料庫重新開源!
  • 華為:伺服器作業系統EulerOS和資料庫GaussDB開源 正籌備開源社區
    此外,華為還在大會上表示,華為伺服器作業系統EulerOS開源,開源名為openEuler。華為宣布將於2019年12月31日開源伺服器作業系統openEuler,2020年6月開源GaussDB OLTP單機版資料庫,2020年第1季度開源MindSpore全場景AI計算框架。
  • 阿里領投開源資料庫初創公司MariaDB的融資
    9月30日消息,據國外媒體TechCrunch報導,據知情人士透露,中國電子商務巨頭阿里巴巴已同意領投開源資料庫初創公司MariaDB總額2290萬歐元(約合2700萬美元)的融資。MariaDB前身為SkySQL,MariaDB因其在行業中的地位而受到阿里巴巴的青睞。
  • 企業級和開源領域「兩開花」,巨杉引領國產資料庫創新
    巨杉資料庫作為業界領先的金融級分布式資料庫廠商, 獲得 「2019年開源資料庫先鋒企業」 及 「2019 GVP-Gitee最有價值開源項目」 兩項殊榮。SequoiaDB 巨杉資料庫始終堅持自研路線,並於2014年正式開源,是國內最早的開源資料庫之一。經過8年的自主研發和技術發展,迭代發展出了技術領先、產品安全穩定、通用性強的金融級產品。
  • 性能優於 MySQL 6 倍?阿里雲 PolarDB 的底氣在哪?
    據悉,該資料庫為阿里雲自研,採用第三代分布式共享存儲架構,與 MySQL 完全兼容,為企業級 OLTP 與 OLAP 一體化資料庫系統整體設計,可實現一個資料庫就可以達到多類資料庫混合使用的效果。另外在 DB Server 設計上,採用 MySQL 完全兼容的思路,完全擁抱開源生態,從 SQL 的編譯、性能優化器和執行計劃等等都保留了傳統關係型資料庫的特色。並且針對 Redolog 的 I/O 路徑,專門設計了多副本共享存儲塊設備。
  • 華為:伺服器作業系統EulerOS和資料庫GaussDB宣布開源
    藍鯨TMT頻道9月19日訊,今日,華為在第四屆華為全聯接大會期間宣布,華為伺服器作業系統EulerOS和資料庫作業系統Gauss開源。華為Cloud&AI產品與服務總裁侯金龍還透露,華為正在與中標紅旗、武漢深之度等公司籌備開源社區,並將在12月31號之前上線。
  • 芬蘭開源資料庫MariaDB獲2290萬歐元融資,阿里巴巴領投
    日前,歐洲開源資料庫項目MariaDB獲得2290萬歐元(約合2700萬美元)的融資,其中,阿里巴巴領投約2000萬歐元,剩餘資金來自現有股東。該交易尚未完成,本周獲得MariaDB股東批准後,有望很快完成。
  • 值得關注的12大開源大數據分析應用軟體
    實際上,它聲稱「在內存中運行程序的速度比Hadoop MapReduce快100倍,在磁碟上運行程度的速度快10倍」。這家公司聲稱,相比與之競爭的解決方案,它幫助企業分析大數據的速度快五倍,而成本卻只有五分之一。4. Jaspersoft與Talend一樣,Jaspersoft也有多個版本,有的版本免費,有的版本收費。社區版是免費、開源的,而Reporting版、AWS版、專業版和企業版需要收費,不過隨帶支持服務。
  • 華為自研資料庫管理系統GaussDB正式開源:2020年上線
    9月19日是上海HUAWEI CONNECT華為全連結大會召開的第二天,華為發布了一系列伺服器產品,同時華為宣布自研關係型資料庫管理系統GaussDB正式開源,開源名稱為openGauss,2020年正式上線。
  • 華為全面啟航計算戰略:「鯤鵬+昇騰」雙引擎、硬體開放、軟體開源...
    HUAWEI CONNECT 2019第二天,華為基於「鯤鵬+昇騰」雙引擎正式全面啟航計算戰略,宣布開源伺服器作業系統、GaussDB OLTP單機版資料庫,開放鯤鵬主板,擁抱多樣性計算時代。華為通過硬體開放、軟體開源、使能合作夥伴,共同開拓萬億級的計算產業大藍海。
  • 偶數科技陶徵霖:做資料庫是站在巨人肩膀上前進
    2006年Hadoop誕生以後,數據分析領域產生了兩大技術路線,一種是基於Hadoop,另一種是MPP的大規模並行處理路線,Greenplum資料庫是其中的代表。但是兩大技術路線各有優缺點,Hadoop可以支持大規模的節點,但是性能很慢,而MPP快、兼容性好,但是節點規模並發度擴展性差。
  • 開源sci期刊審稿快嗎
    發表sci論文,不管是投稿開源sci期刊,還是投稿非開源sci期刊,都需要經過審核程序。由於期刊不同,審核的要求不同,導致審核的快慢有差異。那麼,開源sci期刊審稿快嗎?sci期刊分為開源sci期刊和非開源sci期刊,開源sci期刊又稱OA期刊,向這類期刊投稿發表論文,是需要作者支付一定費用的,審核上不如非開源sci期刊嚴格,那審核效率自然會更快一些。換句話說,正常情況下,開源sci期刊比起非開源sci期刊來說,審核更快一些。但具體多久,會因開源sci期刊不同而有差異。
  • AI 正在改變化學界,開源資料庫成重要驅動力
    新一代由開源工具平臺支持和數據共享的計算機,有可能徹底改變分子和材料的發現過程。我們預測這個領域將成為科學方法的一個組成部分,而不僅僅是一個單獨的研究領域」人類一直享有遠遠超過機器的推理和直覺能力。但科學家現在開始嘗試用人工智慧驅動來解決問題,以加速他們自己的材料發現和優化過程。
  • CCIA開源資料庫專業委員會首批會員單位亮相2018 ACMUG全球年會
    2018年12月8日,由中國計算機行業協會開源資料庫專業委員會(以下簡稱:「專委會」)和中國MySQL/MariaDB用戶組聯合舉辦的「2018 ACMUG全球年會」在CNTV多功能演播廳順利舉行。中國計算機行業協會開源資料庫專業委員會是經中國計算機行業協會第七屆理事會研究決定成立,專委會成立的宗旨和目標是聯合國內從事資料庫領域的軟硬體產品企業、應用企業、投資機構、高校院所、地方(園 區)發展機構(部門)、社團組織、行業用戶,專注於推動我國資料庫產業創新發展,立足全球視野,以服務行業、推動創新、推廣應用、推進企業發展為宗旨,搭建資料庫產業創新合作與對接平臺