Apache基金會宣布騰訊大數據團隊主導的Ozone成為頂級開源項目

2020-12-23 天極網資訊

  【天極網IT新聞頻道】剛剛獲悉,Apache基金董事會通過一致表決,正式批准分布式文件對象存儲Ozone從Hadoop社區孵化成功,成為獨立的Apache頂級開源項目。這意味著,作為騰訊大數據團隊首個參與和主導的開源項目,Ozone已得到全球Apache技術專家的一致認可,成為世界頂級的存儲開源項目之一。

  Ozone 是Apache Hadoop社區推出的面向大數據領域的新一代分布式存儲系統,它的推出解決了Hadoop分布式文件系統在可擴展性上限方面的缺陷問題,能夠支持百億甚至千億級文件規模的存儲。

  自1999年成立以來,Apache 軟體基金會已成功建立起強大的生態圈,其社區湧現了非常多優秀的開源項目,同時有越來越多國內外項目走向這個國際開源社區進行孵化。目前所有的 Apache 項目都需要經過孵化器孵化,滿足一系列質量要求之後才可畢業。Ozone從Hadoop社區孵化成功,不僅是項目本身的重要裡程碑,也是對項目成員學習Apache Way和推動社區發展等一系列成果的認可。

  今年9月,騰訊主導的Ozone 1.0.0版本在Apache Hadoop社區正式發布,標誌著歷經了2年多的社區持續開發,Ozone 已經具備了在大規模生產環境下部署使用的能力。Ozone的設計,吸收和借鑑了很多HDFS的優點。同時支持兼容AWS S3協議的對象訪問接口,且兼容 Hadoop Compatible File System的分布式文件訪問接口。

  Ozone構架圖

  除了參與和貢獻社區,在0zone的應用層面,騰訊也走在前列。據了解,在騰訊內部,目前已經在對象和容器等一些場景使用了Ozone,並且獲得了內部用戶積極的好評反饋,後續也會持續將這部分經驗分享出來。

  隨著1.0.0 的發布,騰訊參與和見證了 Ozone 孵化成為一個 Apache 頂級開源項目的過程。騰訊大數據團隊Ozone項目技術負責人陳怡也被社區推選為Apache Ozone 首位項目主席(Chair) ,同時項目團隊誕生了多位PMC成員和committer,帶領社區一起把Ozone向新一代大數據文件對象存儲系統推進。

  Ozone的生態棧

  「隨著Ozone 成為Apache 頂級項目,越來越多的貢獻者加入到社區的開發中。騰訊內部,一方面計劃在Ozone的基礎上,開發基於SCM的新一代高性能分布式文件系統;另一方面,持續推進 Ozone 在更多業務落地,部署更大規模的生產集群,進一步提高Ozone的可靠性、穩定性和性能,立志將Ozone打磨成為新一代文件對象存儲的標杆。」騰訊雲大數據團隊Ozone項目技術負責人陳怡表示。

  開源協同是當前騰訊最重要的技術戰略之一。以大數據團隊為代表的騰訊內部技術團隊經歷了從使用開源、回饋開源再到主導開源的演變。除了在Ozone項目上的貢獻之外,目前已完成了大數據核心能力全開源。如今,在Apache基金會的大數據項目上,騰訊已經為主流的Hadoop、Spark、Flink等項目貢獻了大量的特性和patch。

  從各大開源基金會公開的數據來看,騰訊已經成為對開源社區貢獻最大的中國網際網路公司之一。

類型:廣告

免責聲明:以上內容為本網站轉自其它媒體,相關信息僅為傳遞更多信息之目的,不代表本網觀點,亦不代表本網站贊同其觀點或證實其內容的真實性。

相關焦點

  • 騰訊大數據團隊主導開發,新一代分布式對象存儲Ozone從Apache基金...
    剛剛獲悉,Apache基金董事會通過一致表決,正式批准分布式文件對象存儲Ozone從Hadoop社區孵化成功,成為獨立的Apache頂級開源項目。這意味著,作為騰訊大數據團隊首個參與和主導的開源項目,Ozone已得到全球Apache技術專家的一致認可,成為世界頂級的存儲開源項目之一。
  • 分布式對象存儲Ozone從Apache基金會畢業,正式成為Apache頂級項目
    剛剛獲悉,Apache基金董事會通過一致表決,正式批准分布式文件對象存儲Ozone從Hadoop社區孵化成功,成為獨立的Apache頂級開源項目。這意味著,作為騰訊大數據團隊首個參與和主導的開源項目,Ozone已得到全球Apache技術專家的一致認可,成為世界頂級的存儲開源項目之一。
  • 源自清華的開源項目Apache®IoTDB™ 成為Apache頂級項目
    清華新聞網9月28日電 9月23日,美國東部時間上午11時, Apache軟體基金會(ASF)宣布Apache®IoTDB™成為Apache頂級項目。Apache IoTDB是首個由中國高校發起並孵化成功的Apache頂級項目。
  • Apache 基金會正式宣布 Griffin 畢業成為頂級項目
    Apache 軟體基金會12月12日正式宣布 Apache Griffin 畢業成為 Apache 頂級項目。
  • 騰訊開源又一裡程碑:Apache TubeMQ迎來全面升級
    目前,騰訊已經是 Apache 基金會、Linux 基金會、CNCF、開放原子基金會等國際頂級開源基金會的重要成員,並向開源基金會捐贈了 TARS、TSeer、Angel、TubeMQ、TKE Stack、TencentOS Tiny 等項目,為 JDK、KVM、Apache Spark、Apache Hadoop、MariaDB 等主流開源項目貢獻了重要的代碼,成為國際開源社區中一股不可忽視的力量
  • 分布式對象存儲系統 Ozone 孵化成功,晉升為 ASF 頂級項目
    來自騰訊開源的消息稱,分布式文件對象存儲 Ozone 從 Hadoop 社區孵化成功,晉升為 Apache 基金會頂級項目。
  • 「騰訊開源十年圖譜」發布,覆蓋雲原生等五大技術領域
    在主動開源方面,騰訊在Github上發布了超過110個精品開源項目,覆蓋雲原生、大數據、AI、移動開發、Web開發五大技術領域,獲得了超過33萬名開發者的關注和Star,穩居全球開源企業貢獻榜前十。在社區參與方面,騰訊深度參與了數十個國際知名開源項目的貢獻,在OpenJDK、KVM等多個頂級開源社區貢獻榜中,騰訊均在國內排行第一,並作為主要貢獻者主導了7個國際知名開源項目的版本發布。騰訊還向多個國際頂級開源基金會捐贈了6個開源項目,同時還是Linux基金會、Apache基金會、CNCF等十餘家開源基金會的最高級別會員。
  • 騰訊雲虛擬化技術團隊:為什麼堅定不移擁抱開源
    根據全球最大開原始碼託管平臺 GitHub 年度報告數據顯示,截至 2019 年 GitHub 託管倉庫已有 1.4 億,2019 年新增倉庫 400 萬個,創建第一個項目的用戶比 2018 年增加44%,130 萬開發者對開源做出首次貢獻。SourceClear 調查報告指出開源項目已呈現指數級增長趨勢,2026 年預計超過 3 億。
  • OpenStack基金會演進為開源基礎設施基金會
    在基金會於10月13日舉行的董事會議中,支付巨頭螞蟻集團作為Kata Containers項目(社區驅動軟體開發)的主要參與者,以白金成員的身份正式加入開源基礎設施基金會。其團隊持續為Kata Containers項目進行上遊貢獻,目前已在數千個節點及10,000多個計算核心上運行Kata Containers程序。
  • 騰訊雲十年新風向:雲原生與開源的未來
    今天更為強調的微信小程序雲開發、騰訊音視頻、騰訊資料庫、騰訊大數據與AI、騰訊安全等相關領域的技術生態,很大程度上也源自於貫穿騰訊過去十年的關鍵詞——擁抱雲原生與開源。雷鋒網所看到的是,從技術角度講,無論通過容器交付業務,還是基於微服務框架研發升級,自研上雲其實也就是需要將業務切換成基於公有雲模式研發,同時將配套的一些列組件框架上雲,成為雲服務的一部分。最後,通過客戶(包括內部QQ、微信等團隊,以及外部客戶)的不斷POC過程中,形成一套騰訊雲原生賦能的方法論。目前,QQ產品體系已經全部搬到騰訊雲上。
  • 中國首個開源基金會來了!
    其後,在網際網路、雲計算、大數據、移動網際網路,至如今的智能數位化時代的洗禮,中國開源在跌宕起伏中逐漸趟出了自己的前進方向。百度、華為已捐獻開源項目日前,百度已經正式完成超級鏈內核項目捐贈到開放原子開源基金會協議的籤訂,百度超級鏈 XuperChain 也成為了首個捐贈給開放原子開源基金會的項目。
  • 雲安全日報200819:Apache發現重要漏洞,可竊取信息,控制系統,需要...
    不過Apache多款產品爆出了重要漏洞.以下是漏洞詳情:一.Apache Solr搜索伺服器Apache Solr是美國阿帕奇(Apache)軟體基金會的一款基於Lucene(一款全文搜尋引擎)的搜索伺服器。該產品支持層面搜索、垂直搜索、高亮顯示搜索結果等。
  • 2026 年全球開源數目將超 3 億!中國開源爆發進行時,關於中國開源...
    根據 CNCF 調查報告,2019 年 84% 的公司在生產中使用容器,其中 78% 的用戶使用 Kubernetes 進行容器集群管理;大數據領域,大數據採集、大數據預處理、大數據存儲及管理、大數據分析及挖掘、大數據展現和應用等關鍵技術。
  • 「集成架構」我們得談談 Apache Camel
    通過提交,最活躍的項目是Apache Camel——一個旨在讓企業開發人員集成大量應用程式的工具。 Apache camel缺乏其他ASF項目Hadoop、Kafka或Spark的品牌認知度;這些項目都被知名企業廣泛使用,其中許多企業已經在此類開源軟體上構建了其架構的關鍵組件。
  • 著名開源項目Apache Doris開發者徐冬奇加入微博廣告技術團隊
    DoNews 6月9日消息(記者 程夢玲)著名開源項目、在線分析型分布式資料庫Apache Doris的主要開發者,原百度鳳巢廣告系統高級架構師、阿里巴巴數據智能商業化技術負責人徐冬奇,已於近日入職微博廣告技術團隊,擔任微博廣告技術總架構師。
  • 11月份Github上最熱門的Java開源項目
    11月份GitHub上最熱門的Java開源項目排行已經出爐啦,一起來看看上榜詳情吧:該項目可部署到伺服器上,不斷完善中……3. Mindustryhttps://github.com/Anuken/MindustryStar 7446Mindustry是一款優秀的開源遊戲,玩家可以自行下載源碼進行修改,如果你想自己編譯,請先確保自己已安裝Java 8和JDK 8。
  • 華為鴻蒙 HarmonyOS 正式開源,進入開放原子開源基金會
    9 月 10 日,華為在 HDC 2020 大會上宣布正式開源鴻蒙作業系統(HarmonyOS)2.0 開源的鴻蒙項目名為 OpenHarmony。OpenHarmony 定位是一款面向全場景的開源分布式作業系統。
  • 2015 Bossie評選:最佳開源大數據工具
    Apache Kylin由eBay研發並在2014年10月貢獻給開源社區,於2014年11月加入Aapche孵化器項目,目前正在為畢業成Apache頂級項目投票中。整個開發團隊都在eBay CCOE中國卓越中心,負責並主導Kylin產品的設計和研發。目前Kylin在eBay內部已經部署了非常大的應用平臺,最大的單個Cube包含超過800億條數據,系統中90%以上的查詢響應小於5秒。這是eBay貢獻至Apache軟體基金會的第一個項目,也是第一個由中國開發團隊完整開發並貢獻至Apache軟體基金會的第一個項目。
  • COSCon'20 & Apache Roadshow- China 精彩收官|數據篇
    (開源社理事長莊表偉24日上海開場致辭)(開源社副理事長陳陽25日北京分會場致辭)在兩天的精彩活動上,9 位國際 / 135 位國內外大咖講師們齊聚於此分享洞見,Apache軟體基金會董事/前任主席Craig Russell,Linux 基金會 AI 基金會主席
  • 騰訊開源分布式存儲系統 Tendis,可完全兼容 Redis
    近日,騰訊宣布開源一個與 Redis 協議完全兼容的高性能分布式存儲系統 Tendis。