粉絲經濟時代,抖音成為現象級流量平臺
在粉絲經濟時代,抓住流量意味著擁有一切可能。抖音作為現今最火的短視頻平臺,日活躍用戶已超過6億,每天數以億計的視頻被播放、轉發和評論。如此龐大的數據規模和訪問壓力,沒有強大且穩定的IT基礎設施顯然是hold不住的。
即便內容創作者沒有粉絲基礎,但上傳的視頻內容足夠優質,同樣有機會成為點播量過千萬的網紅博主。這得益於平臺的智能推薦機制,將短視頻推送到對它感興趣的用戶面前,進而促進轉發和關注,增加用戶黏性。抖音火爆的背後,離不開IT發展帶來的技術紅利,今天我們就來扒一扒抖音背後的「黑科技」。
短視頻平臺如何將你想看的視頻推送到你面前?
如下圖所示,一條短視頻從製作到呈現在用戶面前,大致會經歷以下過程:內容製作者負責拍攝視頻素材、剪輯成片,並上傳到短視頻平臺;短視頻平臺對上傳的視頻進行高度智能化的消重、審核以及特徵識別,並根據識別標籤自動匹配用戶群進行智能推薦分發;最後,用戶就能在移動端看到平臺推送的各類短視頻了。
圖1.短視頻從製作到呈現的全流程
海量視頻場景,主流玩家為何青睞對象存儲?
在上述流程中,短視頻平臺會將上傳成功的視頻存到對象存儲中,基於對象存儲實現視頻內容從上傳到處理再到分發的全生命周期管理。無獨有偶,隨著「網際網路電視」的風靡,傳統的數位電視業務(包括視頻直播和點播服務)也在不斷擴張,傳統NAS已捉襟見肘,主流的服務提供商同樣面臨著向對象存儲轉型的剛需。
即便SAN、NAS、分布式文件系統等存儲產品十分成熟,可主流玩家紛紛選擇對象存儲作為數字底座,原因何在?
海量空間 成本可控
作為短視頻領域的頂流,抖音的母公司——字節跳動每天處理的數據就超過50PB,存量數據早已達到EB級。另據亞太CDN產業聯盟大數據平臺監測統計,字節跳動及旗下公司的CDN峰值總帶寬已超過100Tbps。
在傳統的數位電視領域,趨勢同樣明顯。以天威視訊為例,作為深圳地區數位電視服務的提供商,其用戶規模超過百萬級,存儲需求早已突破PB級。面對海量存儲、高並發訪問以及大規模部署場景下成本優化等現實問題,傳統的集中式存儲顯然無法應對,對象存儲成為管理海量數據的必然選擇。
基於HTTP協議訪問更友好
大多數文件系統使用的是POSIX接口,而對象存儲採用基於HTTP協議的RESTful Web API,應用端可直接通過HTTP協議讀寫數據,這更適合短視頻、數位電視等涉及海量視頻存儲的應用場景。
海量視頻文件讀取性能好
在這類場景中,底層存儲承載了動輒千萬甚至上億個文件,並發訪問量也達到了前所未有的量級。對比文件系統,對象存儲的扁平化數據結構,能夠提供更好的訪問性能。
另外,各類應用廣泛採用元數據檢索的方式進行數據管理,通過對元數據的匹配得到唯一索引,再據此找到並讀取數據。對象存儲的扁平化數據結構和K/V(鍵值對)訪問方式更適合這樣的數據管理方式。
MOS為海量視頻存儲而生
針對上述場景,杉巖基於MOS海量對象存儲,打造了完善的海量視頻存儲解決方案,滿足數位電視服務、媒資管理等應用場景對存儲的需求,為廣電、傳媒等行業客戶帶來了新的選擇。
圖2.基於杉巖MOS的視頻存儲解決方案
匹配海量視頻場景
MOS存儲集群可彈性擴展至數千個節點,提供EB級容量、百TB級聚合帶寬,輕鬆應對海量存儲和高並發訪問壓力,應用無感知擴容。
為視頻處理提供支撐
MOS集成智能數據處理引擎,可對視頻內容進行二次加工,比如智能壓縮、智能標籤等等,同時提供精細化的檢索工具,快速獲取視頻內容。此外,MOS支持引入第三方視頻處理插件,實現數據處理能力的按需擴展。
豐富的管理策略
MOS提供基於標籤控制的共享、轉移、刪除等策略,結合智能數據處理引擎的自動標籤、智能處理等能力,實現視頻內容在上傳、存儲、處理、分發等階段的自動化管理,在提升業務效率的同時,也簡化了管理運維。
綜合成本優化
MOS通過大比例糾刪策略提升硬碟空間利用率,通過數據重刪和壓縮特性縮減無效數據,通過數據自動分層均衡容量與成本,通過配置大容量數據盤和恰當地伺服器硬體節省硬體開支,這使得綜合成本顯著降低。
市場認可度高
從市場認可度來看,在IDC發布的《IDC China SDS Object Market Overview(2020 Q2)》報告中,杉巖對象存儲軟體市場份額名列第二。至今已累計服務數百家行業客戶,產品及方案成熟,贏得了客戶一致認可。
圖3.杉巖對象存儲軟體市場份額排名國內第二
成功實踐:幫助天威視訊搭建近5PB視頻存儲平臺
天威視訊是我國有線電視網絡行業的第一家股份制企業,負責深圳地區有線電視及寬帶網絡的建設、經營和維護,提供有線電視收視服務、電視增值業務以及網際網路接入服務等。
2020年初,天威視訊採用杉巖MOS海量對象存儲作為中心CDN的後端存儲。該項目部署7節點對象存儲集群,總存儲空間近5PB。新建的存儲系統通過S3接口與威視雲平臺的中心CDN完成業務交互,實現直播頻道的實時注入和點播節目的非實時注入,以及二級CDN回源流量的分發。集群帶寬高達90Gbps,為視頻直播、點播服務提供穩定支撐。
圖4.天威視訊項目解決方案
項目上線至今,MOS持續為視頻直播/點播服務提供穩定支撐,為客戶帶來了多項收益。
性能提升20倍,用戶體驗更好
集群帶寬90Gbps以上,整體性能較原有NAS提升20倍以上。視頻推送延時低至毫秒級,用戶收視體驗顯著提升。
安全性提升30%,可靠性更高
採用3副本的數據保護策略,視頻注入文件分片後,均衡存儲在所有節點上,安全性提升30%。
管理效率提升50%,資源分配更靈活
為不同內容提供商劃分不同的桶空間,便於後期靈活的進行內容管理,也可根據版權期限,通過生命周期管理實現策略性的數據導入、遷移、刪除,資源管理效率提升超過50%。
恢復效率提升10倍,運維更簡單
智能化運維無需人工巡檢,為運維工程師減輕工作量。故障節點秒級切換,加之多點並發恢復機制,恢復效率比傳統NAS提升10倍以上。故障風險可預知,避免了潛在的經濟損失。
得益於用戶規模增長,新興的短視頻應用和傳統的數位電視業務都在擴張,隨之而來的是海量視頻資源爆發式增長,也讓對象存儲有了新的用武之地。杉巖MOS海量對象存儲,聚合海量存儲、智能處理等能力,為視頻點播、內容分發等服務提供強大的存儲支撐,無疑是數字底座的最佳之選。