TB級大數據如何採用優刻得USQL數據湖分析降本90%

2021-01-08 騰訊網

摘要：TB級大數據使用優刻得USQL，將數據分析的等待時間從平均43小時降到2小時;同時依託USQL根據數據分析量計費，不使用不收費的特性，幫助客戶將數據運算成本降至自建方案的0.5%。

當前，大數據的價值已無需贅述，作為衡量一個公司核心能力的最底層標準，數據的建設也面臨著諸多難題。為了幫助企業用戶解決大數據分析門檻高、效率低的問題，優刻得USQL數據湖分析應運而生，可輕鬆完成面向海量數據的數據建模工作。

縱觀目前企業大數據建設面臨的問題，可大致分為三點。其一，是數據資產不清晰，伴隨著業務多元化發展，數據來源越來越多但數據質量難以把控;其二，不同業務間煙囪式的數據架構模式造成了數據孤島;其三，伴隨著數據量逐漸擴大，分散的數據如何聯動，挖掘更大的價值成為諸多公司探索重點;而數據分析、數據資產管理、數據安全也面臨越來越嚴峻的挑戰。

企業用戶在雲端搭建大數據平臺時，往往會被大數據生態的複雜性所困擾，需要面臨複雜技術棧導致的人才門檻、大數據分析前期服務部署產生的巨大成本、數據分析耗時長等諸多問題，使得「大數據形成了大麻煩」。

為了幫助用戶解決以上問題，優刻得USQL數據湖分析以一個能力強大的計算平臺作為後端支撐，可以在PB級海量數據上進行複雜的SQL計算，同時USQL擁有讀取型Schema的屬性，可關聯分析多種存儲格式的數據，極大降低了產業用戶使用大數據的門檻。

在場景實踐中，USQL成功賦能新媒體整合營銷平臺愛普新媒的業務部門。目前愛普新媒廣告業務數據規模達到數百TB，日增長量為1TB左右，業務日常不固定的分析需求非常多。在現有的大數據處理方案下，數據部門每月需投入大數據工程師20個人/日，平均每次需求處理時長為1.8天，此外還需額外花費數千元維持一個數據倉庫集群。

與用戶自建大數據平臺的相比，通過使用優刻得USQL，將數據分析的等待時間從平均43小時降到了2小時;同時依託USQL根據數據分析量計費，不使用不收費的特性，幫助客戶將數據運算成本降至自建方案的0.5%;此外，USQL產品7*24小時可用，客戶不需調配技術人員維護，減少了人力支出，也大幅度改善企業對大數據工程師的依賴。

相關焦點

  • UCloud優刻得與國家基因組科學數據中心合作,公開數據助力抗疫科技
    【摘要】來源於國家基因組科學數據中心的公開數據，UCloud優刻得第一時間在對象存儲UFile上完成了該信息庫的鏡像文件；同時，UCloud優刻得也將聯合Basebit翼方健數生態合作夥伴，通過豐富生物信息和雲計算的結合，加快新型冠狀相關科研，實現疫苗的快速研發。
  • 優刻得:中國國際金融股份有限公司關於優刻得科技股份有限公司首次...
    優刻得:中國國際金融股份有限公司關於優刻得科技股份有限公司首次公開發行股票並在科創板上市之戰略投資者的專項核查報告 時間：2020年01月07日 01:12:44&nbsp中財網 原標題:2019年12月8日，發行人以通訊方式召開了首屆董事會第十次會議，審議通過了《關於部分調整優刻得科技股份有限公司首次公開發行股票所募集資金投資項目的議案》、《關於部分調整優刻得科技股份有限公司申請首次公開發行股票並在科創板上市方案的議案》等與本次發行並上市相關議案，決定召開股東大會並將該等議案提交股東大會審議
  • 優刻得創始人季昕華獲上海市勞動模範稱號
    優刻得科技股份有限公司（UCloud）創始人兼執行長季昕華榮獲上海市勞動模範（先進工作者）榮譽稱號。季昕華長期鑽研雲計算、大數據、人工智慧、網絡安全等領域，擁有深厚的行業經驗和技術實力。2012年，季昕華在上海創立優刻得UCloud，公司自成立以來發展迅速，已成長為國內領先的中立第三方雲計算服務商。2020年1月，優刻得UCloud正式登陸科創板，成為科創板雲計算第一股，以及中國A股市場首家「同股不同權」的上市企業。
  • 優刻得科創板註冊獲批 科創板即將迎來雲計算第一股
    首頁 > 傳媒 > 關鍵詞 > 優刻得最新資訊 > 正文 優刻得科創板註冊獲批 科創板即將迎來雲計算第一股
  • 優刻得入選SegmentFault思否2019中國技術品牌影響力企業榜單
    近日，中國最大的新一代開發者社區SegmentFault 思否權威發布《SegmentFault 思否 2019 中國技術品牌影響力企業榜單》，優刻得成功入選。「SF·中國技術品牌影響力」是由SegmentFault思否獨家策劃，依據社區數百萬用戶行為數據及技術品牌在國內市場的行為大數據進行分析，得出最終的榜單排行。該榜單旨在進一步提高中國技術品牌在國內的技術影響力和行業競爭力。關於優刻得：優刻得是國內中立、安全的雲計算服務平臺，堅持中立，不涉足客戶業務領域。
  • 數據中臺、數據湖到底是怎麼回事兒?
    、數據湖等大數據應用實踐話題進行分享，感興趣的小夥伴歡迎上車！演講議題：基於大數據技術構建愛奇藝全鏈路監控平臺演講議題介紹：為了適應業務的快速迭代和創新，並支撐海量的用戶請求，愛奇藝各系統的架構和調用鏈路拓撲越來越複雜。如何構建高效易用的全鏈路監控平臺，快速甄別調用鏈路上的故障及風險點，成為保障服務穩定性的關鍵問題。
  • 優刻得推出分鐘級交付支持RSSD雲盤的裸金屬物理雲2.0
    目前雲計算各大廠商都推出了自己的裸金屬伺服器，幫助用戶的核心業務快速發展。優刻得自2018年起，便開始積極探索基於NVIDIA BlueField DPU高性能的裸金屬物理雲方案，並於2020年上半年正式推出了裸金屬物理雲1.0，打破了傳統網關裸金屬物理雲解決方案中存在的部署不夠靈活，不支持計算、存儲分離的限制。
  • UCloud優刻得推出人臉識別測溫平板和智能防疫一體機
    加之海外疫情仍處於大規模爆發狀態，如何做到外防輸入、內防反彈是當下抗疫工作所面臨的兩大挑戰。為此，UCloud優刻得結合自身在AIoT領域的技術優勢，與中車集團中城捷運合作推出了兩款疫情防控產品：人臉識別測溫平板和智能防疫一體機，可分別應用於不同場景。人臉識別測溫平板通過AI算法進行人臉識別和無接觸測溫；一體機在平板功能的基礎上，更增加了360度消毒功能。
  • UCloud優刻得亮相2020中國移動全球合作夥伴大會
    作為中國移動的戰略合作夥伴，UCloud優刻得帶著多個核心產品到場支持，快傑雲主機、安全屋、UCloudStack、UIoT、UEDN、智能防疫一體機，更有信創、智慧城市、智慧高速、智慧社區、政務數據開放等完備解決方案，UCloud優刻得與中國移動攜手同行，共推5G+雲網融合。
  • 優刻得:A股雲計算「第一股」
    2020年1月20日，優刻得科技股份有限公司在科創板上市。從提交材料到正式掛牌交易，優刻得僅用了9個多月時間，淨募集資金為18.4億元。伴隨優刻得登陸資本市場，科創板制度包容性快速落地，A股市場為「同股不同權」架構公司開闢了上市路徑。作為A股市場雲計算第一股，上市後的優刻得機遇與挑戰並存。
  • 優刻得與廣東唯一網絡科技股份有限公司正式達成戰略合作
    近日，優刻得與廣東唯一網絡科技股份有限公司（以下簡稱「唯一網絡」）達成戰略合作，雙方將基於技術優勢，在雲、大數據、安全合規、解決方案等領域高效協同、互補，推動新技術在產業轉型及行業客戶數位化過程中進一步發揮關鍵作用。
  • 數據湖 VS 數據倉庫之爭?阿里提出大數據架構新概念:湖倉一體
    數據湖是一個集中式存儲庫，允許您以任意規模存儲所有結構化和非結構化數據。您可以按原樣存儲數據（無需先對數據進行結構化處理），並運行不同類型的分析 – 從控制面板和可視化到大數據處理、實時分析和機器學習，以指導做出更好的決策。Azure等其他雲廠商也有各自的定義，本文不再贅述。但無論數據湖的定義如何不同，數據湖的本質其實都包含如下四部分：1.
  • UCloud優刻得容器Cube入選2020年度十大雲原生創新技術方案
    近日，由極客邦科技、InfoQ主辦的首個年度榜單「2020中國技術力量年度榜單評選」結果揭曉，UCloud優刻得 Serverless容器實例Cube成功入選「2020年度十大雲原生創新技術方案」。「2020 年度十大雲原生創新技術方案」作為評選出的四大榜單之一，聚焦IT圈最炙手可熱的「雲原生」領域及優質技術方案，從研發實力、技術創新性、落地案例、市場潛力幾方面綜合評估，最終篩選出UCloud優刻得、華為雲、騰訊雲等10家入選方案。
  • 優刻得助力獅尾智能,確保1.3萬座玻璃幕牆建築雲上自動巡檢
    近日，優刻得UCloud合作夥伴獅尾智能研發的INSKY無人機正式應用於上海玻璃幕牆建築的日常自動巡檢作業，幫助上海市住建委完成玻璃幕牆高空風險的預警工作。在民用領域，無人機通常被認為只能用來娛樂，但是在企業應用領域，無人機正在為業務賦能發揮更大價值。
  • 基於Segment Routing技術 優刻得構建新一代骨幹網 「智能、可靠...
    12月22日，在2020GIDC全球網際網路數據大會上，優刻得正式發布了基於Segment Routing 技術構建的新一代骨幹網架構3.0（以下簡稱骨幹網3.0）。新版本架構的升級能夠合理的規劃專線資源，降低專線成本，從而極大提升骨幹網絡的整體性能。
  • 優刻得科技成為首家對表決權差異化安排的申請企業
    4月2日，昨日晚間上交所披露新受理3家科創板上市企業名單，分別為瀾起科技股份有限公司、優刻得科技股份有限公司、博眾精工科技股份有限公司。　　其中瀾起科技是截至目前所有科創板已受理企業中，2018年淨利潤最高的企業。優刻得科技成為首家對表決權差異化安排的申請企業。
  • 優刻得科技首次發布在科創板上市 上市主要存在風險分析
    中商情報網訊：優刻得科技有限公司首次公開發行股票並在科創板上市。據了解，優刻得科技股份有限公司是一家中立第三方雲計算服務商，現自主研發並提供計算、網絡、存儲等基礎資源以及構建在這些基礎資源之上的基礎IT架構，以及大數據、人工智慧等產品，通過公有雲、私有雲、混合雲三種模式為用戶提供服務。
  • 終於有人把數據中臺講明白了
    而數據倉庫的建設則相對單一，專注於維度模型如何設計，如何拆解指標和維度，卻很少關注基於人、貨、場這些主體進行實體拉通，然後做出全局的畫像數據供前端業務調用。 那我們為什麼會從數據倉庫發展到數據中臺呢？因為傳統的數據倉庫已不能完全滿足企業數據分析的需求。企業已從原來的統計分析轉變為預測分析並提供標籤、推薦等算法，從被動分析轉變為主動分析，從非實時分析轉變為實時分析，並且從結構化數據轉變為結構化、半結構化和非結構化的多元化數據。
  • 大數據五項相關技術與數據分析應用案例
    Chukwa還包括一個靈活而強大的工具包，用於顯示，監測和分析結果，以便做出最佳地使用所收集的數據。5、FlumeFlume是一款高可用、高可靠、分布式的海量日誌採集、聚合和傳輸的系統，Flume支持在日誌系統中定製各類數據發送方，用於收集數據；同時，Flume提供對數據進行簡單處理，並寫到各種數據接受方（可定製）的能力。大數據開發需掌握其安裝、配置以及相關使用方法。
  • 佳能/尼康/阿斯麥三家製造商佔據全球超過90%的半導體光刻機市場
    按照計劃，今年3月份，佳能將時隔7年（自2013年來），面向市場推出新型光刻機「FPA-3030i5a」，這款新品較舊機型的生產效率提升了將近17%。 公開資料顯示，目前以日本佳能、尼康（Nikon）、荷蘭阿斯麥（ASML）為首的3家製造商佔據了全球超過90%的半導體光刻機市場。