比自建Hadoop便宜 雲棲大會揭秘阿里雲數加MaxCompute

2021-01-09 開源中國

DT時代,越來越多的企業應用數據步入雲端。 Hadoop是當下流行的大數據並行計算體系,橫向擴展、生態圈成熟等一直是它的主要特點。

阿里雲數加MaxCompute (原名ODPS)是一種快速、完全託管的TB/PB級數據倉庫解決方案。與傳統 Hadoop 相比,MaxCompute 向用戶提供了完善的數據導入方案以及多種經典的分布式計算模型,能夠更快速的解決用戶海量數據計算問題,有效降低企業成本,並保障數據安全。

國內做大數據,基本就這兩個選擇:自建Hadoop或者使用阿里雲的MaxCompute。像Amazon、Google、微軟的大數據服務在國內基本處於不可用或者很難用的狀態。我們就來對比一下這兩個主流的技術選型:

以企業擁有10TB數據為例,自建hadoop集群,則至少需要6臺機器(3nodes+2NameNode+1jobtracker),成本在20萬左右。除此之外,還需要投入機房資源,網絡設備和運維成本。這其中主要是運維成本,要知道一個運維人員的成本一年至少15萬。這樣,整體算下來要55萬左右。

如果採用阿里雲的MaxCompute,按照現在的報價,大約需要32160(存儲費用)+45000(計算費用)=77160元。也就是說二者的成本差距在7倍以上。

按照Hortonworks首席技術官EricBaldeschwieler關於成本的陳述,就更為誇張:硬體成本只佔Hadoop數據中心總成本的20%。

如此明顯的優勢,相信開發者的選擇已經瞭然於胸。想了解 MaxCompute 目前情況和未來規劃、MaxCompute如何對生態賦能、MaxCompute與自建Hadoop成本效能分析、MaxCompute與開源生態連接工具講解和MaxCompute編譯器與開發環境等方面的技術問題,就來雲棲大會吧~10 月 14 日阿里雲大數據計算服務MaxCompute 阿里雲大數據計算服務專場將有眾多阿里雲大數據資深技術專家為你一一解答以上問題。

這一屆雲棲大會的主題是「飛天·智能」,會有3場主論壇、22場前沿峰會,同時有100餘場分論壇、400餘家科技企業展,圍繞雲計算、大數據、人工智慧、智能硬體、VR、AR、晶片技術、資料庫、loT、作業系統、生物識別、天文科研、金融科技、量子計算等前沿領域進行討論與展出。

開源中國一直致力於為一線開發者提供最熱門的技術乾貨,因此本次雲棲大會我們給用戶帶來了盛大優惠,9月20日起購票活動再升級!返現 100 元基礎上每天再抽 10 張門票免費送!趕緊登錄:https://www.oschina.net/osc-aliyun-yunqi/?s=osc-wz 訂購2017雲棲大會門票吧!

相關焦點

  • 2019 雲棲大會:從馬雲的 DT 到張勇的 DI 時代
    來源:36氪2019 年的阿里巴巴雲棲大會註定是一次與眾不同的技術盛宴,當你通過刷臉認證秒速進入雲棲大會現場時,首先看到的是矗立在顯眼位置的 " 數 · 智 " 兩個大字以及隨處可見的 "APSARA" 標識,"Apsara" 是阿里第一次為雲棲大會啟用的主題名稱,來源於吳哥神廟飛天女神的稱呼 " 阿普薩拉 "
  • 三天後雲棲大會告訴你
    雲棲大會已成為年輕人心中的科技創新風向標2015年的雲棲大會上,馬雲發表主題演講說:「從最初400人參加的站長大會到雲棲大會,我每年來雲棲小鎮,又激動、又恐慌、又感動。激動的是在這裡開啟了夢想之旅,正如15年前我們所希望的創業熱潮。
  • Hadoop是低成本的大數據解決方案?別逗了!
    現在伴隨公有雲技術的成熟,Hadoop甚至連硬體成本也不佔優了。 Hadoop與阿里雲MaxCompute的成本對比國內做大數據,基本就這兩個選擇:自建Hadoop或者使用阿里雲的MaxCompute(就是原來的ODPS)。像Amazon、Google、微軟的大數據服務在國內基本處於不可用或者很難用的狀態。
  • 阿里雲 PolarDB 的底氣在哪?
    9 月 21 日,阿里雲正式發布新一代商用關係型雲資料庫 POLARDB 。
  • hadoop最新發行穩定版:DKHadoop版本介紹
    Hadoop對於從事網際網路工作的朋友來說已經非常熟悉了,相信在我們身邊有很多人正在轉行從事hadoop開發的工作,理所當然也會有很多hadoop入門新手。Hadoop開發太過底層,技術難度遠比我們想像的要大,對新手而言選擇一個合適的hadoop版本就意味著上手更快!
  • 平頭哥首款晶片玄鐵910曝光 阿里雲呼喚全面上雲時代
    日阿里雲上海峰會正式開幕,會場中隨處可見的All in Cloud彰顯這次大會的主題,中國雲計算發展過十年,阿里雲走向被集成,新舊IT權杖在逐漸交替,All in Cloud時代是否真的到來?此外在本次大會上,阿里還公布了自研平頭哥晶片的最新消息。雲計算的拐點,也是阿里雲的拐點「不是每個人都能看到時代拐點的來臨。」
  • 緊跟在線教育前進步伐,阿里雲亮相GET2020教育科技大會
    11月23日至24日,由芥末堆主辦的GET2020教育科技大會將在北京國際會議中心舉行,全球教育行業的數百名資深從業者將歡聚一堂,共同探討熱門話題,分析行業發展趨勢。 11月23日至24日,由芥末堆主辦的GET2020教育科技大會將在北京國際會議中心舉行,全球教育行業的數百名資深從業者將歡聚一堂,共同探討熱門話題,分析行業發展趨勢。作為亞洲第一、全球前三的雲計算公司,阿里雲受邀出席本次大會,並與外界分享新技術在教育領域創造的豐碩成果。
  • 2020雲棲大會|一圖看懂阿里雲2.0
    驅動中國2020年9月17日消息 今日,阿里2020雲棲大會正式舉行,阿里智能總裁張建鋒在會上宣布:阿里雲進入2.0時代。同時,大會上還發布了阿里首個雲電腦「無影」以及第一款物流機器人「小蠻驢」,將雲變革帶入終端。
  • 雲棲大會驚現技術內幕?趣拍CEO王強宇揭秘創業新模式
    2016雲棲大會·深圳峰會於4月19日-21日在深圳隆重舉行。雲棲大會是目前全球最大規模的雲計算大數據行業巡迴峰會,此次阿里雲主辦的雲棲大會集合四大亮點「技術突破無邊界」「萬物連接皆跨界」「DT生態無國界」「雲端價值新世界」,備受矚目。趣拍CEO王強宇應邀出席大會並做了主題演講,為各大創業者帶來福利,揭秘技術內幕。
  • 深港兩地氣象部門聯手阿里雲全球尋「測雨英雄」
    中國氣象報通訊員唐歷 魏曉琳報導 5月23日,在2018雲棲大會武漢峰會上,深圳市氣象局攜手香港天文臺,與阿里雲一道舉行天池全球氣象AI挑戰賽,面向全球尋找「測雨英雄」。
  • 阿里雲與奇點雲共建零售超級視覺計算平臺——奇點識客...
    9月25日,在2019雲棲大會,阿里雲與奇點雲聯合發布了第三代零售超級視覺計算平臺—奇點識客3.0。作為阿里雲VCS平臺在新零售場景首家合作夥伴,奇點雲與阿里雲VCS平臺正式達成戰略合作。阿里雲吳翰清與奇點雲創始人張金銀共同出席了發布儀式。
  • 競品分析:阿里雲 VS 騰訊雲,AT的短兵相接
    產品1:阿里雲1)企業、產品市場地位根據國際權威諮詢機構IDC正式發布的《2019年Q1中國公有雲服務市場跟蹤報告》,該報告顯示,2019年第一季度,在IaaS市場上,阿里雲超過43%的市場份額穩居第一,遠遠超過了身後的其他玩家。而且阿里雲在中國雲計算市場已經一家獨大數年之久,地位鞏固。
  • 雲棲大會首設奉賢專場 發力智慧園區場景突破
    央廣網上海9月17日消息(記者唐奇雲)今天(17日)下午,由阿里巴巴集團主辦、一年一度的雲棲大會首度來到上海奉賢,在愛企谷數字經濟產業園的5G共享智能展廳舉辦「雲棲百城匯」上海站愛企谷專場活動。奉賢區副區長顧佾、上海市經濟和信息化委員會生產性服務業處處長何勇出席活動、致辭,並見證了阿里雲-愛企智慧園區聯合解決方案——IQ360雲智付智慧系統的發布及籤約儀式。
  • 大數據國家工程實驗室 阿里雲連中二元
    記者從阿里雲方面獲悉,在近日國家發改委公布的大數據國家工程實驗室名單,阿里雲連中二元:由阿里雲參與的「工業大數據應用技術國家工程實驗室」和「大數據系統軟體國家工程實驗室」均獲批覆認定。前者由航天雲網旗下北京航天數據股份有限公司和阿里雲聯合共建;後者則由清華大學和北京理工大學牽頭,阿里雲負責支撐實驗室研發全生命周期大數據系統軟體及其開源創新平臺體系。國家工程實驗室承擔著國家科技創新的重要任務,此次共有19個國家工程實驗室獲批。其中,大數據領域11個,「網際網路+」領域8個,足見國家期待領域創新的風向。
  • | 雲棲大會 2018
    9月19日,在阿里雲棲大會上,出現了許多自動駕駛相關的元素。將這些元素連接起來,不難看出阿里自動駕駛的發展藍圖。A.I. Labs X實驗室在雲棲大會的會場,阿里巴巴A.I.斑馬、高德地圖、AliOS、千尋、阿里雲在雲棲大會的展區內,還有斑馬、AliOS、高德、千尋、阿里雲的展臺。在斑馬的展臺上,可以看到多輛搭載斑馬系統的車型。上個月發布的榮威Marvel X也出現在了展臺上。榮威Marvel X使用了AR導航系統,該系統能夠在駕駛艙儀錶盤上顯示車輛應該執行的行駛路線。
  • 阿里雲數據中臺核心策略:Dataphin為基石 Quick系列切入場景
    9月18日,2020雲棲大會技術主論壇上,阿里巴巴集團副總裁、數據技術及產品部總經理朋新宇重磅發布阿里雲數據中臺新產品——智能貨品運營平臺Quick Stock,全面升級全域消費者運營平臺Quick Audience2.0。
  • 不要猶豫 了解這些即可玩轉阿里雲ODPS
    要想了解ODPS,不妨先看一下阿里雲的整體架構:最底層是Linux+PC Server,上層軟體是飛天,飛天是阿里雲09年開始開發的一款分布式系統軟體,主要提供分布式存儲和分布式計算的調度、編程框架。開發語言是C++, 2013年該系統在生產環境支持調度5000臺機器的集群。
  • 阿里雲POLARDB*:創新的雲託管資料庫
    關係型資料庫作為雲託管服務應用廣泛,稱為資料庫即服務(DBaaS)解決方案。但是基於雲的RDBMS可能本身存在難題。因此,雲託管關係型資料庫解決方案必須實現數字轉型。常見的資料庫有MySQL*和Oracle資料庫*,但不管是內部託管,還是雲託管,它們可能均難以保護、管理和擴展,而且可能達不到所需性能和服務質量(QoS)。
  • 阿里雲發布第三代自研神龍架構,能在雲上獲得物理機100%計算能力
    首頁 > 快訊 > 關鍵詞 > 阿里雲最新資訊 > 正文 阿里雲發布第三代自研神龍架構,能在雲上獲得物理機100%計算能力