阿里雲飛天大數據平臺 已成全球集群規模最大計算平臺

2021-01-09 東方財富網

摘要

【阿里雲飛天大數據平臺 已成全球集群規模最大計算平臺】7月25日，阿里雲飛天大數據平臺亮相阿里雲峰會上海站。阿里雲飛天大數據平臺擁有中國唯一自主研發的計算引擎，經過多年發展，目前已成為全球集群規模最大的計算平臺，支撐海量數據存儲和計算。在民生服務領域，飛天大數據平臺已經「最多跑一次」、城市大腦等場景中，協助政府優化服務模式，實現更智能便捷的服務能力，保障信息安全。（重慶商報）

　　7月25日，阿里雲飛天大數據平臺亮相阿里雲峰會上海站。阿里雲飛天大數據平臺擁有中國唯一自主研發的計算引擎，經過多年發展，目前已成為全球集群規模最大的計算平臺，支撐海量數據存儲和計算。在民生服務領域，飛天大數據平臺已經「最多跑一次」、城市大腦等場景中，協助政府優化服務模式，實現更智能便捷的服務能力，保障信息安全。

　　數據顯示，目前飛天大數據平臺可擴展至10萬臺計算集群，集群規模全球第一。據了解，該平臺的研發源自阿里巴巴的自身實踐。十年前，新興網際網路業態蓬勃發展，中小企業在阿里巴巴電商平臺上爆發式增長，商家第一次具備直接觸達消費者的普惠渠道，激發了龐大的消費者需求，傳統IT架構難以承擔海量數據的處理。在此背景下，阿里巴巴開始探索全新的技術來支撐爆發式增長的數據存儲和計算需求。

　　大部分企業的慣例是直接使用國際開源的數據計算框架Hadoop。在阿里巴巴內部，也曾出現過激烈的爭論，究竟是直接使用開源Hadoop，還是自主研發一個大數據平臺。最後，阿里方面認為，電子商務蓬勃發展，如果用Hadoop搭建的大數據平臺，必將在不久的未來再次遇到挑戰，更別提為外部企業提供服務，成為普惠的IT基礎設施。

　　由此，阿里巴巴堅定投入飛天大數據平臺功研發。早在2012年初，阿里巴巴技術委員會主席王堅就表示，「從戰略上來說，阿里雲想做的事情實際上可以解讀為Amazon+Google並有所超越。將單一集群做到數千乃至更高，技術上是國家和企業競爭力的標誌。阿里巴巴必須攻克這道難關。」

　　也正是因為這一堅持，才有了今天中國唯一自主研發的飛天大數據平臺。

（文章來源：重慶商報）

(責任編輯：DF520)

相關焦點

  • 百度實時計算平臺的實現和應用
    「大數據」在網際網路行業中已是普遍現象，一家公司每天累積的用戶行為數據甚至已不能用TB來衡量。海量數據對實時分析和計算提出了更高的要求，實時處理程序必須確保在嚴格的時間內響應，通常以秒為單位，甚至是毫秒。傳統的批量計算模型已無法滿足這些要求，必須用專門的實時計算系統替代。
  • 阿里發布圖計算平臺GraphScope 即將向全社會開源
    11月9日，在第二屆世界科學、技術和發展論壇上，阿里發布了GraphScope，這是世界上第一個一站式的超大型分布計算平臺，並被選為中國科學技術協會「科創中國」平臺。圖表可以自然地表達數據之間的複雜關聯和結構特徵。圖形計算能夠有效地挖掘和利用這種關聯信息，已成為數字本土時代的關鍵技術之一。
  • 回顧阿里翻譯平臺的進擊之路!
    ，阿里翻譯宣布已成功研發阿里雲PAI工具，基於阿里雲PAI可以將神經網絡翻譯訓練效率提升5倍，這將大大加速阿里翻譯平臺的建設。眾所周知，馬雲爸爸在創立阿里之前是做翻譯服務及開翻譯公司的。隨著近幾年阿里的業務不斷擴大，全球化戰略進程加速，語言問題也成了最基礎的需求之一，尤其是跨境電商交易對多語言翻譯需求尤甚。此前阿里在語言服務上做過不少努力，包括收購國內最大的人工翻譯平臺，但這遠遠不能滿足阿里平臺上億級別客戶的需求。正當阿里為此感到苦悶時，谷歌的神經網絡翻譯技術出現了，可以說是為阿里的翻譯平臺插上了一對翅膀。
  • 張建偉:百度大數據平臺流式shuffle服務
    作為中國規模最大的架構師豪門盛會，本屆大會以「架構創新之路」為主題，站在創新的風口上，與大家共同打造一場通過架構創新及各種IT新技術來帶動企業轉型增效，助力架構師們騰飛的技術盛會。　　大會雲集了國內外頂尖專家，共同探討雲計算和大數據等技術背景下，如何通過架構創新及各種IT新技術來帶動企業轉型增效。
  • 解析阿里雲大數據服務——ODPS
    如今，對內：阿里小微金服（支付寶、小貸、保險、基金）已經全線遷入，數據魔方，阿里媽媽廣告聯盟，廣告搜索，點擊預測模型訓練，淘寶指數，阿里無線，高德，中信21cn等業務都在其上，對外：藥品電子監管系統、華大基因也已採用了ODPS。
  • 阿里正式開源通用算法平臺Alink,「雙11」將天貓推薦點擊率提升4%
    整理 | 若名近日，阿里雲計算部門已在 GitHub 上發布了其 Alink 平臺的「核心代碼」，並上傳了一系列算法庫，它們支持批處理和流處理，這對支持機器學習任務至關重要。 Alink 是基於 Flink 的通用算法平臺，由阿里巴巴計算平臺 PAI 團隊研發。
  • 阿里雲計算能力實現多項突破 BigBench規模全球首次被拓展至100TB
    10月12日，阿里巴巴集團副總裁周靖人在雲棲大會上發布了阿里雲在大數據計算能力上的新突破：將BigBench數據規模擴展到100T；流計算2.0每秒峰值達千萬QPS，整體鏈路延時亞秒級；E-MapReduce對比同類產品平均性能提升3倍。周靖人說，數據是機器智能創新的基礎，擁有充沛的計算能力才能全面釋放數據的價值。
  • 從Hadoop到自主研發,技術解讀阿里去IOE後的系統架構
    在這個大背景下，各個機構不得不在控制好成本支出的同時，不停摸索著時刻激增用戶數據的解決之道，其中阿里的成績無疑令人豔羨——單集群規模5000+的飛天，以及多集群跨機房計算的支持。本次我們將以飛天為例，為大家分享大規模分布式系統打造過程中的艱難坎坷及應對之道。
  • 保密教育| 中國科學家製備全球最大規模的光量子計算晶片,量子計算再掀高潮!
    2017年底，IBM宣布成功研製一款50量子位處理器原型，並與三星、摩根大通等公司建立量子計算合作，有望在2021年前推出首個在金融領域的量子計算應用。而量子計算的另一領先者——谷歌正在開發有49個量子位的機器，此外，英特爾和微軟在該領域也持續加大投入。
  • 阿里、騰訊的智能醫療暗戰從平臺走向生態
    阿里、騰訊爭相布局智能醫療在AI技術驅動下，新型經濟逐漸迎來了蓬勃發展。作為新型經濟風口的智能醫療行業也因此受益，市場規模開始急劇增長。據中商產業研究院顯示，2019年全球智能醫療市場超過4000億美元，國內市場規模超過880億元，預計2020年這個規模會超過千億。
  • 瞄準人機結合模式 阿里語言服務平臺欲研發下一代翻譯平臺
    昨日，國內最大的專業人工翻譯服務平臺——365翻譯在被阿里巴巴收購半年後首次對外披露，平臺正式定位為阿里巴巴語言服務平臺，將瞄準人機結合模式，在語言服務領域進行更多創新。據悉，365翻譯自融入阿里體系後強勁發展，半年內承接電商領域人工翻譯需求超百萬次，在機器翻譯領域，電商相關語種的準確率已與谷歌翻譯持平。
  • 阿里高級安全專家自述:阿里如何實現數據「可用不可見」
    然而，在今天，數字經濟已經促使計算模式和數據共享層次發展到了一個全新的高度，數據擁有方、存儲方、計算方和使用方都高度分散，再讓他們處於統一的安全域中已不太可能。數字經濟的發展，呼喚填補上述安全缺口的新技術出現和大規模使用，從而助力數字經濟發展到新的階段。
  • 天大天醫聯手共建智能醫學學院;英國最大電商平臺藉助 AI 打擊欺詐...
    然後，技術人員可確定哪回合跑得最快，提供前所未見的統計數據。Rao表示，由此可見，此技術可應用於更多產業，而不僅是每家AI公司正在追求的醫療、農業和金融市場。英國最大電商平臺藉助AI打擊欺詐 效率提升15倍雷鋒網消息，近期，英國最大電商平臺Ocado Technology表示將機器學習植入欺詐檢測系統，Ocado智能平臺的欺詐檢出率較先前提升了15倍。
  • 全球最大分布式算力平臺BOINC,正式進軍邊緣計算領域
    5月27日消息，2019數博會，在由中國國際大數據產業博覽會組委會主辦、鈦媒體、中國信息通信研究院聯合承辦的工業網際網路應用發展論壇（IAF）上，全球最大分布算力平臺Boinc創始人David P.Anderson介紹該平臺的運作模式，以及低價的算力對實現工業網際網路的巨大作用。據介紹，目前Boinc平臺上有超過100萬計算機，平臺上的算力已經超過了全世界最大的超算。
  • 大數據架構與系統(上午):高效處理高並發及大數據的經典分享
    【CSDN現場報導】中國最具影響、規模最大的大數據領域盛會—— 2013中國大數據技術大會(Big Data Technology Conference，BDTC)於2013年12月5-6日在北京舉行。
  • 大數據分析平臺搭建架構圖
    這個步驟包括從預先計算匯總的結果中讀取和用一種友好界面或者表格的形式展示出來，這樣便於企業內部非專業人員對數據分析結果的理解。 最基礎的大數據分析平臺有上述的幾層架構，如果是數據量龐大的企業，會需要架構更加複雜的分析平臺。
  • 全球最大自貿區來了,商家們搶著入駐這家電商平臺
    全球最大自貿區背景之下，中國與東南亞的跨境電商平臺也有了更多想像空間：65%的貨物享受零關稅，各個國家至少開放100個領域的市場……而一周前在杭州舉行的第五屆全球跨境電商峰會上，復旦大學特聘教授、重慶市原市長黃奇帆表示，到2035年，中國進出口貿易額的50%有望用跨境電商的方式來表達。
  • 阿里巴巴AI每天調用超1萬億次,服務全球10億人
    在AI晶片層，平頭哥發布全球最強AI晶片含光800，打破業界紀錄，性能及能效比全球第一，1塊含光800算力就相當於10塊GPU。目前已應用於阿里巴巴多個場景，如支持拍立淘索引時間從1小時縮短至5分鐘。在AI雲服務層，全球前三、亞太第一的阿里雲已構建起亞洲種類最全、規模最大的人工智慧集群，包括GPU、FPGA、NPU、CPU、超算集群、第三代神龍架構等在內的公共雲服務共同形成面向人工智慧產業的最強力支持。日前為某現象級APP調集近萬片GPU，創下世界記錄。在AI平臺層，飛天AI平臺、飛天大數據平臺、AIoT平臺等大大降低AI開發門檻。
  • 阿里量子實驗室最新成果:全球最強量子電路模擬器「太章」誕生
    基於阿里巴巴集團計算平臺在線集群的超強算力，「太章」在世界上率先成功模擬了 81（9x9）比特 40 層的作為基準的谷歌隨機量子電路，之前達到這個層數的模擬器只能處理 49 比特。同時，本次模擬任務只動用了阿里巴巴計算平臺在線集群 14% 的計算資源。
  • 釘釘最新數據拉升阿里市值?月活已是騰訊字節相關產品總和2.5倍
    通過專屬訂製，在中國最大的日化廠商立白集團，釘釘成為了35000導購員、1800銷售團隊、5800配送司機、20000業務員、600家供應商、1000家經銷商手機中的 "嘟嘟"。立白年銷售額已超過200億，在 "嘟嘟" 中卻能實現核心指標在線化：庫存滿足率、發貨及時率、費用核銷率、物料下發率等，都可按照團隊分拆目標，實時跟蹤和調用。