網易杭研汪源:十餘年大數據凝結成「網易雲」
2020-11-26 網易科技
日前，網易杭州研究院執行院長汪源應邀出席了在上海舉辦的WAW大會。面向近400位與會者，汪源首次深入解密了網易在大數據分析領域的發展歷程。
作為國內最早誕生的網際網路公司之一，網易在過去十餘年的產品研發、孵化和運維過程中，各個部門對數據有著不同且繁雜的需求。而如何把這些繁雜的需求用統一的手段來解決，網易在大數據分析方面同樣進行了十餘年的探索，並自去年開始通過「網易雲」將這些能力開放出來，推出了一系列面向B端企業客戶的雲服務產品。
從起步到整合，「平臺化」讓網易大數據分析進入全新階段
「如何梳理數據、處理數據、提高數據分析的效率，這是網易一直思考的問題。」為此，汪源將網易大數據分析之路劃分為的初步階段、起步階段和整合階段。
在2008年之前的初步階段中，網易和國內的大部分公司一樣，使用傳統的方法進行數據統計。2009和2010這兩年的起步階段可以說是網易大數據分析的「初體驗」，當然，這也與網易及國內整體網際網路行業的快速發展密切相關。據汪源介紹道，正是因為面對海量的業務數據，網易開始嘗試引入Hadoop等成熟的開源技術來解決數據存儲和計算的瓶頸。
從2011年開始，針對在前一階段中數據格式不規範、產品接入成本高、計算任務不穩定等突出問題，網易開始走上大數據分析的整合階段，其中最顯著的變化便是整合、規範各類採集機制、指標體系等等，將數據分析「工具化」，以適應產品、設計、運營和市場等不同場景。
在經歷全面整合的階段之後，「儘管將數據分析進行『工具化』，問題依舊無法全部解決，個性化的數據需求以及靈活的多維分析難以完全滿足，數據分析的「平臺化」開始被提出並讓網易的大數據分析進入了全新的階段。」汪源介紹說。
十年磨一劍，平臺化產品逐漸成型
2014年以來，網易開始加速大數據分析的平臺化發展，以提高數據獲取速度，提升數據分析效率，更快發揮數據價值。汪源在現場著重向與會人員介紹的「網易猛獁」與「網易有數」兩大數據分析平臺就是在這個階段逐漸成型的。
對於很多企業而言，大數據雖然看起來很美，卻又面臨著數據孤立，需求反饋周期長的問題。汪源介紹說，「網易猛獁大數據平臺可以實現從各種不同數據源提取數據，同步到內核存儲系統，同時對外提供便捷的操作體驗」。據悉，現在每天約有130億條數據進入網易猛獁平臺，經過數據建模和清洗，進行數據分析預測。
網易的另一大數據分析平臺，網易有數則可以極大簡化數據探索，提高數據可視化方面的效率，提供靈活報表製作等，以幫助分析師專注於自己的工作內容。此外，網易有數在二維空間通過綜合運用分區塊、顏色、大小等標識，展示多維數據，推動數據文化落地，有利於管理層和業務人員的自助分析。
未來設想：融合大數據處理平臺
在演講最後，汪源對未來大數據平臺進行了展望。他認為，從網易大數據分析發展歷程的第三階段開始，抽象數據的層次已經很高。進入第四個階段，網易希望能夠開發出更基礎的大數據處理平臺。
大數據分析面臨著各種挑戰，既有集成、計算和分析等老問題，同時也有新的挑戰，諸如數據量多樣性、數據類型多樣性、需求多樣性等等。面對這些問題，汪源對網易大數據分析平臺未來的解決方案做了設想：「回歸到計算機軟硬體設計的基礎，各類計算機應用場景，總線和組件的標準是統一的。從底層基礎開始，設計大數據平臺的數據集成、計算和分析，開發出融合大數據處理平臺，從而滿足未來遇到的各種個性化的數據分析需求。」
網易云：網易技術服務能力的全面開放
從網易大數據發展的歷程來看，基於杭州研究院10年的技術積累，網易已經具備了成熟的網際網路產品技術體系，並且有力的支撐了網易雲音樂、雲課堂、易信、LOFTER、公開課等產品的發展。
汪源表示，網易雲將會把這些能力開放出來，提供給更多的用戶使用。比如網易易盾作為網易雲推出的極速智能反垃圾雲服務，其依託的便是網易的大數據和雲計算服務，提供文本過濾、圖片識別、語音分析、視頻檢測等服務，幫助企業和開發者實現對垃圾有害信息的實時過濾、精準攔截。
除了網易易盾，從去年開始，以網易技術服務能力的全面開放為初衷，網易雲還陸續發布了網易雲信（即時通訊雲服務）、網易七魚（全智能雲客服）、網易視頻雲、網易蜂巢（容器雲）、網易雲捕（質量跟蹤平臺）一系列的產品，並從研發雲、運營雲、運作雲的角度對雲服務進行了重新的劃分。不難想像，隨著網易在雲計算、大數據等方面的研發積累日漸成熟，將會有更多樣的雲服務出現。
相關焦點
-
網易深度解析:網易的戰略、速度與邊界
(3)遊戲事業群-工作室/中臺部門/獨立發行線緊密配合、運行高效，持續開拓創新遊戲品類:網易遊戲目前擁有互動娛樂和雷火兩大事業群，下設20餘個遊戲工作室，中臺部門及 獨立發行線提供支撐與聯動，實現能力復用，且十分注重「自下而上」的遊戲研發模式，近年來在遊戲產品上不斷創新，湧現出多款具備差異化競爭優勢的精品遊戲，在細分賽道已 出現《陰陽師》、《率土之濱》等爆款遊戲。 -
網易雲音樂的星辰大海
2017年8月，網易雲音樂因版權問題下架了部分音樂，雖然在國家版權局的推動下，騰訊音樂與網易雲音樂於2018年2月相互授權了音樂作品。但大家對於這場被擺在明面的版權大戰記憶仍存，自此之後，大眾對於網易雲音樂版權的討論就沒停過。巧合的是，就在2017年，B站也經歷過無版權資源被下架的時刻，大部分版權被優愛騰掌握手中的影視區是當時的下架重災區。 -
網易雲音樂,又一次猜錯了年輕人
首先，基於文案引發廣泛共鳴，撬動社交資源實現產品的出圈，是網易一貫以來的產品基因。時間撥回十多年前，網易公司從做博客時代開始，便是靠著青春傷痛文學橫空出世，一度成為一代人安放矯情碎碎念的秘密根據地。而即使是在18年關停博客後，轉戰音樂的網易雲也依然沒有放棄對社交和文藝的執著追求。 -
網易雲音樂,「雲村」交友
儘管無法新增下載，但在下架期間網易雲音樂並沒有閒著，直接將「朋友」擴建為「雲村」，在新版本的外衣下面，隱藏著一顆做音樂社交的野心。年初三款社交App欲挑戰微信均以失敗告終，網易雲音樂此番嘗試又能撬動多大市場？ -
「網易雲課堂」產品分析報告
我認為網易雲課堂選擇優先開放現有這些微專業的原因有以下幾點：1).網易本身是網際網路技術公司只有「藝術」和「其他」兩個大類別中的微專業完全由第三方機構提供，剩餘的「技術支撐」、「後臺開發」、「前臺開發」以及「產品設計」裡的微專業大部分都由網易提供或網易與第三方聯合提供。 -
產品分析報告 | 網易雲音樂,差異化路線打造高質量音樂社區
，根據2019年8月數據，2019年市場規模將達124.4億元。根據七麥數據，2020年3月9日至6月5日這三個月，網易雲音樂日下載量整體趨勢在QQ音樂和酷狗音樂之上，月用戶活躍量增速也處於第一。結合上列數據及圖十，可以看出雖然網易雲較QQ音樂、酷狗音樂等競品進入市場較晚，但憑藉音樂社交的多樣以及成功的營銷手段，在音樂市場佔據了一席之地，優質的UGC內容和歌曲音質也收穫了用戶的高口碑。但其劣勢同樣非常顯著，曲庫規模小及版權資源不夠是網易雲作為一個音樂軟體致命的缺陷。 -
宮崎駿IP加持,網易雲音樂加速二次元布局
吉卜力工作室，這個由動畫大師宮崎駿命名，成立於1985年的動畫工作室，不僅憑藉一系列溫暖的經典動畫作品在中國收穫了無數影迷的喜愛，2018年，時隔30年後重映的電影《龍貓》第一次登上了中國大熒幕，便拿下了4天票房破億的好成績。毋庸置疑，吉卜力工作室的宮崎駿作品在國內上至70後下至00後的群體中都具有廣泛的知名度。 -
蘇打綠休團3年,以超級分身魚丁糸在網易雲音樂重新出道
從校園走向主流，從臺灣走向大陸，從第一張單曲《空氣中的視聽與幻覺》，到《小情歌》《無與倫比的美麗》等流行金曲，蘇打綠用16年成為了一代人的青春。2016年，蘇打綠以專輯《冬未了》收穫第27屆臺灣金曲獎最佳國語專輯獎、最佳樂團獎等5大獎項。在這樂團生涯的高光之後不久，蘇打綠宣布休團。 -
華益弘為了免費:網易雲的生態想像力
其次，網易高層對第二季度財報的解讀中，並未發布網易雲音樂的月活量、付費用戶等要害數據，雖然網易一貫如此，但對比過往數據可以看到，網易雲音樂的下滑趨勢明顯。2019年第四季度，包括網易雲音樂的創新及其他事務毛利率還在20.6%，而今年第二季度其毛利率降至18.5%。與財政上的下滑趨勢相呼應的，無疑是網絡上用戶的口誅筆伐。 -
兩強格局形成,騰訊音樂與網易雲音樂居第一陣營
3.網易雲音樂成行業最大黑馬，音樂社區或為制勝法寶： 網易雲音樂憑藉音樂社區的定位於近年快速發展，MAU超過1億，成為頭部音樂產品中唯一的非騰訊選手。6成以上，拉新和留存表現較好，表明音樂社區的定位對用戶極具吸引力，用戶願意留在網易雲音樂這個社區。 -
網易高管解讀2019Q2財報:創新業務增長亮眼,網易雲音樂用戶超8億
8月8日，網易公司(NASDAQ: NTES)發布2019年第二季度財報。財報顯示，網易第二季度淨收入為187.69億元人民幣(27.34億美元)，同比增長15.3%;淨利潤為30.71億元人民幣(4.47億美元)，同比增長45.8%。 -
網易雲音樂支持網易紅卡/白金卡免流
IT之家12月13日消息 昨天晚上，網易雲音樂iOS、安卓版推送了最新的v4.3.1版本更新，本次更新主要是支持了網易旗下的定向免流卡網易紅卡、網易白金卡定向免流功能，如果你已經辦理網易旗下流量卡可以更新使用。 -
淺析移動音樂競品:網易雲音樂 VS QQ音樂
（3）線下活動比達諮詢調查顯示，超過五成用戶參加過移動音樂應用舉辦的線下活動或對其感興趣。說明移動音樂應用舉辦線下活動有比較大的市場，隨著移動音樂上下遊產業鏈的完善，和版權商、藝人的合作，其線下活動業務會有更多的機會。 -
網易雲音樂與口碑達成平臺合作
聯合構築「音樂生活王國」，推出「萬有引力計劃」 12月19日，網易雲音樂和口碑宣布達成平臺合作，聯合構築「音樂生活王國」。為此，雙方已經共同推出「萬有引力計劃」，由網易雲音樂提供趣味音樂內容，通過線上雙方產品打通及線下10000家口碑品牌商戶滲透，實現音樂對生活場景的全覆蓋，為用戶帶去「音樂+生活」的趣味體驗。 -
拿下阿里投資後,網易雲音樂突圍之路仍困難重重
眾所周知，內容是短視頻行業的固有痛點，為了吸睛而不擇手段的現象時有發生，網易雲音樂在引入短視頻新形態之後，內容質量參差不齊，使其多年努力建立起來的頗具「逼格」的品牌形象遭受打擊。同時，平臺上短視頻大多為網絡視頻的二度創作，其中不少是各大衛視的節目、演唱會片段，版權問題成疑。二、2018年10月上線LOOK直播。 -
他超越周杰倫成網易雲第一天王 出道十年不上綜藝不演戲
從2010年之後華語樂壇越來越不景氣了，像周杰倫、林俊傑、王力宏、潘瑋柏這樣的天王都選擇去當導師，或者參加真人秀綜藝，不是他們不想寫歌而是音樂市場實在不景氣，整個華語市場有信心出專輯能賺到錢的，可能都不會超過十位。 -
《Life·live》專輯上線網易雲音樂 焦邁奇鬼卞銀臨們給一周七天寫...
近日，網易雲音樂獨家出品的數字專輯《Life·live》正式上線。作為網易雲音樂首張星期概念專輯，《Life·live》由花粥、焦邁奇、葵因、鬼卞、銀臨、廖俊濤、周銳7位音樂人共同加盟完成，共收錄7首全新作品，用不同的音樂色彩串聯起從周一到周日的7天。這張專輯收穫大量歌迷的喜愛，每首歌曲的評論數都迅速超過999+，多首歌曲登上網易雲音樂熱歌榜、飆升榜、原創榜等榜單。 -
...微軟取得五角大樓百億訂單;網易嚴選總經理柳曉剛離職;知乎上線...
大公司微軟取得五角大樓百億雲計算訂單歷時一年多，五角大樓的百億雲計算訂單終於確定了供應商，微軟成了最後的贏家。這一消息公布後，微軟股價在上一個交易日盤後上漲3%，亞馬遜則有不到1%的下跌。這份合同為聯合企業防禦基礎設施雲（JEDI）項目，內容是為美軍建設一個雲計算系統，能讓軍方在戰場或偏遠地區能更好的訪問數據，以提高其作戰能力。這份合同價值100億美元，期限為10年，這是雲計算市場迄今為止金額最大的訂單。 -
網易雲音樂在線聽歌下載
網易雲音樂是一款由網易公司出品專注於發現與分享的音樂播放軟體，全國3億用戶推薦，匯集超全華語歐美日韓、電音ACG古風等超全音樂種類，超清音質、優質歌單、自動智能推薦音樂、海量逗趣樂評、精緻視覺交互。 -
網易大數據解碼帝都大城小事
這座中國城市史上獨一無二的首都，在網際網路大數據的精準解讀下究竟模樣幾何？你混跡於此、奮鬥於此的居住、立業夢想，與你身旁的他或她是否一樣呢？1月13日，網易「解碼城市態度」之北京站暨2016地產冠軍榜盛典揭曉了一切問題的答案。中國領先的網際網路公司網易強強聯合鏈家、高德地圖，三方聯手發布權威大數據，一個完整的北京城得以呈現在公眾眼前。