用5杯星巴克交換一場數據思維提升丨易觀A10峰會開發者日

2020-12-16 易觀數科

199元,你可以再添一件Uniqlo格子衫,或者5杯提神醒腦星巴克。

或者,199159元,你可以買一張2020易觀A10開發者日門票,聽優路科技、滴滴、騰訊等名企大廠技術開源,布道數據的實時處理與多維分析;更有2020易觀數科算法大賽冠亞軍現場分享。

10月24日,易觀數科開發者日,8折門票,限時搶購中。

近日,IDC 正式對外發布了《全球雲 IT 基礎設施季度跟蹤報告》,其中數據顯示 2020 年第二季度,供應商銷售面向雲環境(包括公共雲和私有雲)的 IT 基礎設施產品(伺服器、企業存儲系統和乙太網交換機)所得的收入同比猛增 34.4%;與此同時,2020 年第二季度,傳統的非雲 IT 基礎設施方面的投入卻同比下降了 8.7%。

面對從本地到上雲的變革,企業需要考慮上雲後對企業分析數據生命周期各個環節的架構設計上有何根本性影響。

通過雲計算在各領域下的不斷融合,逐漸催生了越來越豐富的線上應用場景,紛紛轉向在線協作、線上娛樂、購物、教育乃至醫療。這些場景為各領域間帶來了更多聯繫的同時,也為數據本身賦予了更多潛在的價值,但數據積累和聯繫本身並不產生價值,產生價值的是新的數據組織形式以及新型商業邏輯和業務邏輯的興起。

而這些邏輯的背後,更是需要企業決策層、開發者、運營人員都要具備卓越的數據分析思維和能力,才能更好地發現書架子。因為任何人既是數據的生產者、使用者,也是數據價值的受益者。尤其在當前業務快速變化的背景下,對數據處理的實時性、多維性、準確性要求越來越高,只有培養形成多維度數據分析思維方法,掌握一套成體系化的方法論以及便捷的工具,才能更加從容面對當前愈發複雜的數據局面、體系以及結構。

而在 2020 年 10 月 24 日,開發者節日的當天,易觀 A10 數據智能峰會——易觀數科開發者日將正式拉開帷幕,這無疑是一個絕佳的選擇。

01數據的實時處理及多維分析能力

從 Hive Sql 到 Spark Sql,滴滴是如何實踐的?

在網際網路越來越快的今天,企業對數據服務實時化的需求也日益增多,打車、外賣、網購、在線視頻等場景下,用戶已經不能忍受較長時間的等待,企業對於大數據實時決策的要求也越來越嚴苛。

而大數據工程師可能常面臨這樣的痛點——

每日工作都在寫 ETL 腳本,而很多報表卻只用一次;臨時需求眾多,研發怎麼加速研發、業務部門還是覺得慢;業務變化快、數據來源多、數據治理難;數據處理能力不足、時間滯後,想用 Ad-hoc 查詢但數據量過大。使用最新的大數據技術,技術人員只做最底層的數據整理、把業務口徑還給業務人員、直接讓業務人員從最明細的數據中進行統計分析、秒級返回結果,成為破局關鍵。

那麼企業該如何構建自己的實時多維系統?如何選擇業務場景並建模?如何選擇數據查詢底層引擎與技術生態?此次易觀數科開發者日上,邀請到了滴滴 HDFS&Spark 技術專家楊建丹到場進行【Hive sql 遷移到 Spark sql 在滴滴的實踐】的主題分享。楊建丹主要負責滴滴 Hive 服務、離線 Yarn 調度以及 Spark 服務,基於其在 Yarn、HDFS 和 Hive 上多年的實踐經驗,現場為各位開發者深入解讀從 Hive 到 Spark 的遷移心得。

多維實時分析系統在騰訊看點的演進與實踐

數據體量的爆發一方面體現了業務、用戶的規模在快速增長,但另一方面也為企業後臺技術架構提出了更高的需求。

尤其在這樣一個用數據說話的時代,數據在一定程度上決定了企業決策的準確與否。一般來說,分析速度是隨著數據體量的增長而放緩,快速增長的數據也導致了企業的決策速度越來越慢。原始數據體量越來越大、來源渠道廣泛等問題,導致原始上報數據體量上萬、數據上報的格式混亂、缺乏內容維度信息、缺少用戶畫像信息等問題每天都在出現,不僅分析耗時長,並且也無法直接賦能下遊的運營人員。

並且對於業務較大的企業而言,實時在線分析上百億數據更是決定了業務能否在極短時間下做出調整並反饋用戶,這在一切求快的網際網路環境中顯得尤為重要。但問題在於當前大多數企業的技術平臺難以及時響應業務決策的需求。試想僅一次查詢就需要耗時幾分鐘,全面的分析決策則很有可能會花去幾個整天。在商機稍縱即逝的今天,這對一個企業而言可能是致命的。

在這樣的大背景下,多維實時數據分析系統的重要性不言而喻,此次易觀數科開發者日的活動現場,大會邀請到了騰訊高級工程師王展雄,基於他所負責的騰訊看點實際業務場景,全面解讀在上報數據量達萬億規模的騰訊看點,如何構建極低延遲的實時計算和亞秒級的多維實時查詢系統

02技術開源,使數據能力平民化

Hadoop 到雲原生,如何使企業級數據能力平民化

企業數據上雲已經成為潮流,面對從本地到上雲的變革,企業需要考慮上雲後對企業分析數據生命周期各個環節的架構設計上有何根本影響,例如雲上存儲選型就會深遠地改變計算框架的架構,了解分析上雲的趨勢和實踐中的問題有助於做更好的平臺架構選型、更好地發揮數據的價值,易觀數科開發者日當天,Kyligence 技術合伙人兼產品負責人李棟,將帶來《企業大數據分析平臺:從 hadoop 到雲原生》的主題演講。

普及數據分析能力

近年來隨著 BI 的興起,數據開始在企業應用中發揮越來越重要的作用,在各行各業及各部門都在擁抱數位化的大背景下,數據的角色不再僅僅是業務發展的衍生物,而是加速業務轉型、推動業務科學決策的重要資產。大到企業的決策、發展方向,小到一個營銷活動的效果好壞,數據的價值正在無限放大,企業對於數據價值的期望也越來越高,這些都催生了數據更加廣泛的應用場景和價值。

場景的豐富,也使得越來越多的群體開始對數據產生依賴性。因此,需要將數據能力賦能到行業中的每一處角落。Argo 作為易觀方舟智能分析組件的免費版本,在不破壞商業生態的前提下,其最大限度的繼承了易觀方舟 UBA 的數據能力。基於秒算引擎的支撐,Argo 可以實現從全端用戶行為數據採集到自定義多維度實時用戶行為分析、智能埋點等數據能力。作為一款免費產品,Argo 的開放性更是體現的淋漓盡致,通過採取開放性的 IOTA 架構設計,將不同模塊間相互分離,支持核心存儲、計算引擎模塊熱插拔升級。提供多種連接方式,賦予企業靈活高效的數據採集、分析能力以及快速二次開發能力,降低用戶數據獲取、存儲、分析的研發資源與時間成本。

此次易觀數科開發者日的活動現場,易觀方舟首席架構師江振興將對 Argo 新版本的能力做全面解讀,幫助開發者在了解易觀 Argo 新版更新的同時,能夠快速上手這樣一款免費的用戶行為分析工具。

開源分布式任務調度引擎

另一方面,在實現數據分析、智能運維的過程中,集群間的數據調度是每一個大數據平臺的必備工具。當下容器技術的流行,進一步擴大了數據間的分離程度。因此這也需要技術人員能夠靈活、快速的實現在各個容器資源中的數據調度。

易觀發起的開源項目 Apache DolphinScheduler 作為一款分布式任務調度引擎,其所支持的多活性可以有效保證 ETL 的調度效率,另一方面是調度界面的可視化,開發者在實現調度時只需要在界面上進行拖拉拽形式的操作即可,極大降低了數據調度的技術門檻。

此次易觀數科開發者日的活動現場,也邀請到了Apache DolphinScheduler 的 K8S 實現主要作者、Apache DolphinScheduler Committer、優路科技的李文禾老師到場,全方位解讀 Apache DolphinScheduler 在 K8s 生態下的實踐痛點與解決方案。

03更多精彩盡在 10.24 易觀數科開發者日

2020 年 10 月 24 日,易觀 A10 數據智能峰會——易觀數科開發者日,全天攜多維數據分析實踐以及更多精彩分享,期待各位開發者的深度參與。現在搶購8折門票優惠,快速鎖定有限名額。

相關焦點

  • 定檔5.20「WAVE SUMMIT 2020」深度學習開發者峰會官網上線開啟報名
    最新消息,定檔5月20日召開的「WAVE SUMMIT 2020」深度學習開發者峰會官網正式上線,廣大科研所、高校、企業的開發者和個人均可註冊報名,提前鎖定這場深度學習領域國內最頂級的極客盛會。在峰會召開前的一周,5月16日-19日,技術愛好者和開發者們還能提前開啟深度學習的知識盛宴,「百度架構師手把手帶你零基礎入門深度學習」系列入門課程,「Python小白逆襲AI大神」、「EasyDL一站式模型訓練與部署實戰」等熱門精選課,保證峰會前的「熱身」學習充實而受用。
  • 教你免費喝星巴克
    1、交行×星巴克丨21000積分兌中杯飲品即日起至2020年5月29日,交行信用卡持卡人可登錄買單吧APP,21000積分兌換1杯任意口味星巴克中杯手工調製飲品。2、中行×星巴克丨22000積分兌2張大杯券即日起至2021年4月14日,中行信用卡持卡人可登錄繽紛生活APP,22000積分兌換1杯星巴克大杯手工調製飲品,每周六、日兌一贈一。
  • 2017年,開發者需要關注哪些AI國際峰會?看這篇就夠了
    閒話少說,以下是 2017 全年最值得開發者關注的 AI 、機器學習峰會,共 17 場,按時間順序排列:1. AAAI 2017Domino 數據科學峰會(Domino Data Science Pop-Up )
  • 會員活動丨與星巴克一起,度過一個溫暖的冬日~
    一杯咖啡,一份美好,享受慢生活!長沙音樂廳丨會員活動日咖啡教室聊到咖啡,在部分人的傳統印象裡,只有拿鐵、卡布奇諾,但其實一杯手衝,才是喝咖啡的經典選擇。用小小一杯手衝咖啡,你就可以用舌尖探尋到你未曾到過的世界,一杯醇香,感受不一樣的風味。星巴克黑圍裙咖啡大師課跟隨咖啡大師走進深度咖啡世界,認識咖啡,了解咖啡的千萬種味蕾,您可以親手為自己製作一杯手衝咖啡。
  • 百度雲智峰會12月17日召開,央視財經《對話》現場要做一場高端訪談
    值得注意的是,國內知名欄目央視財經《對話》登陸2020百度雲智峰會,在現場與知名學者、企業家,圍繞當下中國產業轉型面臨哪些挑戰和趨勢、席捲全球的人工智慧浪潮將創造哪些新價值、企業如何抓住新機遇、中國經濟發展格局如何在智能時代實現躍遷等熱點話題,為現場觀眾帶來一場思想交流盛宴。  即日起,登陸2020百度雲智峰會官網以及在百度APP搜索「2020百度雲智峰會」即可預約報名。
  • 看雪2020第四屆安全開發者峰會順利落幕!
    10月23日,看雪2020第四屆安全開發者峰會(看雪2020 SDC)順應時代的變化,聚焦全新的網絡安全挑戰,以「新安全,新未來」為主題,在上海浦東喜來登由由大酒店為大家帶來一場技術的饕餮盛宴。看雪學院舉辦安全開發者峰會的目的正是為了給關注網絡安全的專業人士提供一個分享交流的窗口,也力爭讓更多普通人開始關注網絡安全,助推我國網際網路安全的高速發展。首先,看雪創始人段鋼先生發表本次峰會開幕詞。
  • 雷軍喝星巴克 網友:中杯大杯超大杯
    6月5日消息,小米創始人、小米集團董事長兼CEO雷軍發微博表示,自己喜歡星巴克、脫脂牛奶不加糖,以前是喜歡超大杯,為了控制咖啡上癮改喝中杯。雷軍自述是星巴克的老鐵,考慮購買星巴克的股票,做個小股東,這樣喝星巴克可能會更有成就感。
  • 星巴克任命新CMO,「數據決策時代」真的來了
    星巴克新任CMO Brady Brewer2016年12月,星巴克開通微信支付,10個月後,支付寶支付也接入門店。那時,很多人都覺得以星巴克為代表的全球性品牌,數位化動作不夠快。因為中國移動網際網路的發展太快了,2016年手機支付已經遍地開花,擺攤賣菜的商販都用上了手機掃碼。
  • 中智關愛通籤約易觀方舟,數據驅動企業服務創新
    近日,一站式員工關愛解決方案供應商中智關愛通,正式籤約易觀方舟智能用戶運營平臺,通過數據驅動下的智能分析+智能運營,持續優化員工關愛解決方案,不斷提昇平臺服務創新及用戶體驗。中智關愛通此次籤約易觀方舟智能用戶運營平臺,將藉助易觀方舟在數據智能領域的技術實力和行業經驗,幫助關愛通持續優化員工關愛解決方案,利用數位化智能運營平臺,高效迭代優化企業人力資源管理服務,從而更高效地幫助客戶建設企業文化,提升員工滿意度和忠誠度。
  • 星巴克「中杯」究竟隱含了哪些秘密?
    首先我們來看一下大小咖啡的利潤率:日本經濟學家吉本佳生在《在星巴克要買大杯》一書中,就以日本的星巴克小杯(Short)和大杯(Grande)為例做了成本分析。兩者都加上200日元的運營成本,則總成本為:小杯拿鐵225日元,大杯拿鐵250日元。由於拿鐵小杯和大杯標價分別為300日元和400日元,扣除各自成本,還可以算出兩者的利潤和利潤率:小杯拿鐵利潤為75日元,利潤率25%;大杯拿鐵利潤150元,利潤率37.5%。
  • 杭州首家星巴克手語門店:用一杯咖啡連結兩個世界
    12月3日是「國際殘疾人日」。星巴克杭州濱江城市之星店在精心的裝修後重新開業。咖啡師楊迪穿著黑圍裙站在收銀臺前,在手寫板的配合下,順暢地為客人點了單,一小會兒,取餐器提示客人,咖啡做好了。楊迪手語比出「謝謝」。一旁的點餐提示牌上寫著:「我們聽不見你的聲音,但我們很樂意為你服務。」
  • 加速物聯網與垂直行業融合,塗鴉智能助力開發者投身AIoT大時代
    物聯網中的設備通過傳感器進行環境、位置、狀態等信息的採集,通過各類連接協議進行數據的傳播與交換,最終實現對物品的智能化跟蹤、識別、監控和管理,極大提升了管理效率。根據信息傳輸的環節和技術架構的區別,物聯網可以分為四層,分別是感知層、接入層、網絡層和應用層。
  • 從星巴克的杯子之路,到喜茶吸管杯的杯子經濟
    由於每家店的貓爪杯數量有限,星粉之間的一場「聖杯戰爭」打響了,更誇張的是,一隻原價199的玻璃杯被炒到了1000多人民幣。不只是節日,星巴克時不時也會根據季節的變化推出應景的主題杯,比如2017年星巴克在美國門店推出具有春天氣息的藍色、黃色和綠色紙杯。
  • 繼中國後 星巴克宣布用全美門店直飲杯蓋替代吸管
    北青-北京頭條記者9月11日了解到,繼中國市場之後,星巴克宣布,9月底美國和加拿大所有星巴克將用直飲杯蓋代替吸管。之所以採取這一舉措,是因為使用直飲杯蓋將會比之前減少9%的塑料含量,而塑料這一材料在大自然中很難被消化。
  • 一杯咖啡迎新年 相約梧州首家星巴克
    2020年12月24日 21:36 來源:廣西新聞網 作者:餘佳麗 編輯:黎鑫 「我今年的生日願望是希望梧州星巴克能順利開業
  • 小旗歐飛籤約易觀方舟,數據驅動電商服務創新
    近日,小旗歐飛--數字權益營銷服務平臺正式籤約易觀方舟。現今戰略合作夥已覆蓋網際網路、銀行保險等泛金融、能源、運營商、航司、線下傳統行業等各個行業,與騰訊、阿里、字節跳動、網易等都建立了長期穩固的合作,並且多年來一直保持創新活力,持續豐富權益產品及提升營銷方案能力,幫助客戶實現業務和形象雙增長。經過多年深耕,歐飛在數字權益營銷行業領域已經處於相對領先地位。
  • 星巴克買一送一,沒有任何條件!
    湛江美食與萌元素探店丨評測丨攻略丨優惠各位小夥伴,好消息好消息!星巴克買一送一又來了!這次不用XX卡!不用任何條件!沒有任何套路,只要到店就能享受優惠~敲黑板一定要記下來這個日子、↓↓↓本周四5月10日下午5點至8點買任意大杯和超大杯手工調製飲品買一贈一咖啡控們都準備了嗎?和一杯網紅奶茶差不多價格就可以享受星巴克30多塊=兩杯!!
  • 美國星巴克正式用直飲杯蓋替代吸管,星冰樂等仍用吸管,但將換成紙質
    當地時間9月10日,星巴克宣布,9月底美國和加拿大所有星巴克將用直飲杯蓋代替吸管。星巴克稱直飲杯蓋比之前的杯蓋減少了9%的塑料含量。此前,中國、日本、韓國等國家的星巴克也已開始替換為直飲杯蓋。網友評論:延伸閱讀:麥當勞中國停用塑料吸管,推無吸管新杯蓋,預計每年減少400噸塑料繼今年5月發布全新品牌理念「因為熱愛,盡善而行」之後,麥當勞中國於今天宣布這一理念下的首項環保舉措:公司將在食品包裝上進一步減塑,逐步停用塑料吸管。
  • 今日公司福利:星巴克保溫杯1個
    今日飯總手頭上有1個星巴克聖誕款保溫杯粉絲太多實在不知道送給誰就交給機器來抽取老規矩隨機送出祝你好運氣【今日福利】【星巴克糖果城堡款保溫杯】1個價值259元僅1個***【領取方式】在【深圳吃飯公司】主頁對話框回復「星巴克」即有機會獲取福利【領取須知
  • 美國星巴克正式用直飲杯蓋替代吸管,網友熱議:估計還是會提供紙...
    虎撲9月11日訊 9月11日,美國星巴克宣布9月底美國和加拿大所有星巴克將用直飲杯蓋代替吸管。新聞發出後引起網友熱議,具體內容如下:詳細視頻戳我【#美國星巴克正式用直飲杯蓋替代吸管#,9月底覆蓋所有門店】當地時間9月10日,星巴克宣布,9月底美國和加拿大所有星巴克將用直飲杯蓋代替吸管。