流媒體技術基礎

2020-12-04 電子產品世界

一、流式傳輸的基礎
在網絡上傳輸音/視頻等多媒體信息目前主要有下載和流式傳輸兩種方案。A/V文件一般都較大,所以需要的存儲容量也較大;同時由於網絡帶寬的限制,下載常常要花數分鐘甚至數小時,所以這種處理方法延遲也很大。流式傳輸時,聲音、影像或動畫等時基媒體由音視頻伺服器向用戶計算機的連續、實時傳送,用戶不必等到整個文件全部下載完畢,而只需經過幾秒或十數秒的啟動延時即可進行觀看。當
聲音等時基媒體在客戶機上播放時,文件的剩餘部分將在後臺從伺服器內繼續下載。流式不僅使啟動延時成十倍、百倍地縮短,而且不需要太大的緩存容量。流式傳輸避免了用戶必須等待整個文件全部從Internet上下載才能觀看的缺點。
流媒體指在Internet/Intranet中使用流式傳輸技術的連續時基媒體,如:音頻、視頻或多媒體文件。流式媒體在播放前並不下載整個文件,只將開始部分內容存入內存,流式媒體的數據流隨時傳送隨時播放,只是在開始時有一些延遲。流媒體實現的關鍵技術就是流式傳輸。

流式傳輸定義很廣泛,現在主要指通過網絡傳送媒體(如視頻、音頻)的技術總稱。其特定含義為通過Internet將影視節目傳送到PC機。實現流式傳輸有兩種方法:實時流式傳輸(Realtime streaming)和順序流式傳輸(progressive streaming)。一般說來,如視頻為實時廣播,或使用流式傳輸媒體伺服器,或應用如RTSP的實時協議,即為實時流式傳輸。如使用HTTP伺服器,文件即通過順序流發送。採用那種傳輸方法依賴你的需求。當然,流式文件也支持在播放前完全下載到硬碟。

順序流式傳輸

順序流式傳輸是順序下載,在下載文件的同時用戶可觀看再線媒體,在給定時刻,用戶只能觀看已下載的那部分,而不能跳到還未下載的前頭部分,順序流式傳輸不象實時流式傳輸在傳輸期間根據用戶連接的速度做調整。由於標準的HTTP伺服器可發送這種形式的文件,也不需要其他特殊協議,它經常被稱作HTTP流式傳輸。順序流式傳輸比較適合高質量的短片段,如片頭、片尾和廣告,由於該文件在播放前觀看的部分是無損下載的,這種方法保證電影播放的最終質量。這意味著用戶在觀看前,必須經歷延遲,對較慢的連接尤其如此。

對通過數據機發布短片段,順序流式傳輸顯得很實用,它允許用比數據機更高的數據速率創建視頻片段。儘管有延遲,畢竟可讓你發布較高質量的視頻片段。

順序流式文件是放在標準HTTP或FTP伺服器上,易於管理,基本上與防火牆無關。順序流式傳輸不適合長片段和有隨機訪問要求的視頻,如:講座、演說與演示。它也不支持現場廣播,嚴格說來,它是一種點播技術。

實時流式傳輸

實時流式傳輸指保證媒體信號帶寬與網絡連接配匹,使媒體可被實時觀看到。實時流與HTTP流式傳輸不同,他需要專用的流媒體伺服器與傳輸協議。

實時流式傳輸總是實時傳送,特別適合現場事件,也支持隨機訪問,用戶可快進或後退以觀看前面或後面的內容。理論上,實時流一經播放就可不停止,但實際上,可能發生周期暫停。

實時流式傳輸必須配匹連接帶寬,這意味著在以數據機速度連接時圖象質量較差。而且,由於出錯丟失的信息被忽略掉,網絡擁擠或出現問題時,視頻質量很差。如欲保證視頻質量,順序流式傳輸也許更好。實時流式傳輸需要特定伺服器,如QuickTime Streaming Server、RealServer與Windows Media Server。這些伺服器允許你對媒體發送進行更多級別的控制,因而系統設置、管理比標準HTTP伺服器更複雜。實時流式傳輸還需要特殊網絡協議,如:RTSP(Realtime Streaming Protocol)或MMS(Microsoft Media Server)。這些協議在有防火牆時有時會出現問題,導致用戶不能看到一些地點的實時內容。

二、流媒體技術原理

流式傳輸的實現需要緩存。因為Internet以包傳輸為基礎進行斷續的異步傳輸,對一個實時A/V源或存儲的A/V文件,在傳輸中它們要被分解為許多包,由於網絡是動態變化的,各個包選擇的路由可能不盡相同,故到達客戶端的時間延遲也就不等,甚至先發的數據包還有可能後到。為此,使用緩存系統來彌補延遲和抖動的影響,並保證數據包的順序正確,從而使媒體數據能連續輸出,而不會因為網絡暫時擁塞使播放出現停頓。通常高速緩存所需容量並不大,因為高速緩存使用環形鍊表結構來存儲數據:通過丟棄已經播放的內容,流可以重新利用空出的高速緩存空間來緩存後續尚未播放的內容。一般流式傳輸的實現需要合適的傳輸協議。由於TCP需要較多的開銷,故不太適合傳輸實時數據。在流式傳輸的實現方案中,一般採用HTTP/TCP來傳輸控制信息,而用RTP/UDP來傳輸實時聲音數據。

流式傳輸的過程一般是這樣的:用戶選擇某一流媒體服務後,Web瀏覽器與Web伺服器之間使用HTTP/TCP交換控制信息,以便把需要傳輸的實時數據從原始信息中檢索出來;然後客戶機上的Web瀏覽器啟動A/VHelper程序,使用HTTP從Web伺服器檢索相關參數對Helper程序初始化。這些參數可能包括目錄信息、A/V數據的編碼類型或與A/V檢索相關的伺服器地址。

A/VHelper程序及A/V伺服器運行實時流控制協議(RTSP),以交換A/V傳輸所需的控制信息。與CD播放機或VCRs所提供的功能相似,RTSP提供了操縱播放、快進、快倒、暫停及錄製等命令的方法。A/V伺服器使用RTP/UDP協議將A/V數據傳輸給A/V客戶程序(一般可認為客戶程序等同於Helper程序),一旦A/V數據抵達客戶端,A/V客戶程序即可播放輸出。

需要說明的是,在流式傳輸中,使用RTP/UDP和RTSP/TCP兩種不同的通信協議與A/V伺服器建立聯繫,是為了能夠把伺服器的輸出重定向到一個不同於運行A/VHelper程序所在客戶機的目的地址。實現流式傳輸一般都需要專用伺服器和播放器,其基本原理如圖所示。

三、智能流技術(SureStream)

今天,28.8Kbps數據機是Internet連接的基本速率,cable modem、 ADSL、DSS、ISDN等發展快,內容提供商不得不要麼限制發布媒體質量,要麼限制連接人數。根據RealNetwork站點統計,對28.8Kbps數據機,實際流量為10bps到26Kbps,呈鐘形分布,高峰在20Kbps。這意味著若內容提供商選擇20Kbps固定速率,將有大量用戶得不到好質量信號,並可能停止媒體流而引起客戶端再次緩衝,直到接收足夠數據。

一種解決方法是伺服器減少發送給客戶端的數據而阻止再緩衝,在RealSystem 5.0中,這種方法稱為「視頻流瘦化」。這種方法的限制是RealVideo文件為一種數據速率設計,結果可通過抽取內部幀擴展到更低速率,導致質量較低。離原始數據速率越遠,質量越差。另一種解決方法是根據不同連接速率創建多個文件,根據用戶連接,伺服器發送相應文件,這種方法帶來製作和管理上的困難,而且,用戶連接是動態變化的,伺服器也無法實時協調。智能流技術通過兩種途徑克服帶寬協調和流瘦化。首先,確立一個編碼框架,允許不同速率的多個流同時編碼,合併到同一個文件中;第二,採用一種複雜客戶/伺服器機制探測帶寬變化。

針對軟體、設備和數據傳輸速度上的差別,用戶以不同帶寬瀏覽音視頻內容。為滿足客戶要求,Progressive networks公司編碼、記錄不同速率下媒體數據,並保存在單一文件中,此文件稱為智能流文件,即創建可擴展流式文件。當客戶端發出請求,它將其帶寬容量傳給伺服器,媒體伺服器根據客戶帶寬將智能流文件相應部分傳送給用戶。以此方式,用戶可看到最可能的優質傳輸,製作人員只需要壓縮一次,管理員也只需要維護單一文件,而媒體伺服器根據所得帶寬自動切換。智能流通過描述I現實世界Internet上變化的帶寬特點來發送高質量媒體並保證可靠性,並對混合連接環境的內容授權提供了解決方法。流媒體實現方式如下:

對所有連接速率環境創建一個文件
在混合環境下以不同速率傳送媒體
根據網絡變化,無縫切換到其它速率
關鍵幀優先,音頻比部分幀數據重要
向後兼容老版本RealPlayer

智能流在RealSystem G2中是對所謂自適應流管理(ASM)API的實現,ASM描述流式數據的類型,輔助智能決策,確定發送那種類型數據包。文件格式和廣播插件定義了ASM規則。用最簡單的形式分配預定義屬性和平均帶寬給數據包組。對高級形式,ASM規則允許插件根據網絡條件變化改變數據包發送。每個ASM規則可有一定義條件的演示式,如演示式定義客戶帶寬是5,000到15,000Kbps,包損失小於2.5%。如此條件描述了客戶當前網絡連接,客戶就訂閱此規則。定義在規則中的屬性有助於RealServer有效傳送數據包,如網絡條件變化,客戶就訂閱一個不同規則。

相關焦點

  • 除了鑑黃和防恐,AI技術在流媒體領域還有哪些應用
    從內容生產到消費各個階段,AI技術與算法毫無疑問為直播性能的提升打開了一扇新大門。視頻分析處理、網絡故障診斷以及廣告推等執行繁瑣、重複耗時的場景,亦逐漸被深度學習技術所「攻佔」。那麼,人工智慧究竟如何為流媒體應用提供支撐的?在直播和短視頻領域,還有哪些應用將成為AI的下一座「城池」?
  • 通過採用3G網絡進行設計移動流媒體播放系統
    1 移動流媒體工作原理 網際網路是IP分組交換為基礎進行連續的異步傳輸,待各個分組到達目的主機後再根據分組序列進行組包,但對於在線音頻、視頻文件,往往其所在存儲空間很大,在網絡中傳輸需要被分解為很多IP包,又網絡狀態甚至網絡拓撲都是動態變化的,每個包經過的路由可能不盡相同,所以到達客戶端的時間延遲也不盡相同,有時候先發的數據包還有可能後到。
  • 新流媒體時代下,視頻的互聯方式
    而就在同一天,蘋果公司正式公布了Apple TV +的訂閱價格和發布日期,這意味著迪士尼與蘋果的流媒體之戰已經悄然打響了。流媒體雖然初看顯得尤為高大上,但其本質就是把連續的影像和聲音信息放在網站伺服器上,讓用戶邊下載邊觀看、收聽,而無須等文件下載到自己的機器上後才可以觀看的網絡傳輸技術。自從十幾年前被提出後,流媒體便在實際應用中獲得不斷的改進與發展。
  • 國外流媒體激戰正酣,國內流媒體電影之路還在繼續
    與國外流媒體Netflix、亞馬遜、迪士尼等流媒體製作的影片不同的,國內流媒體網站起初也是採用了製造網絡電影,但是能引起轟動的影片卻是少之又少,如今採用購買版權的方式也算是對於電影創造的一種尊重,不過,這種盈利模式並非長遠之際,而且這對於國內流媒體網站而言更像一種宣傳。
  • 凌度12寸流媒體A906 御世 即將上市
    今天就為大家介紹一款,凌度12寸流媒體A906 。凌度12寸流媒體A906還搭載了 Mstar高端流媒體晶片,具有 全新編解碼技術,大幅提升視頻壓縮效率,相同文件大小 畫質更清晰、色差更小。即使是在運動過程中,畫面也十分清晰,重要內容毫不模糊,讓視野一清再清。
  • 英超推出OTT流媒體平臺,要革傳播轉播方式的命?
    日前,英超CEO理察-馬斯特斯向媒體證實,英超正考慮推出OTT流媒體服務平臺,但尚無具體時間表。英超OTT流媒體平臺的發布,不會徹底顛覆現在的版權市場。但賺差價的「中間商」所處的生存空間將更加逼仄,英超官方以及球迷會成為獲益者。
  • ADAYO華陽第三代高清流媒體後視鏡,助力魅力值!
    作為ADAYO華陽集團汽車電子業務的主力軍,惠州華陽通用電子有限公司(簡稱「華陽通用」)始終積極迎合汽車智能化的發展趨勢:於2016年在國內率先推出流媒體後視鏡產品;於2018年推出第二代流媒體後視鏡,為長城高端品牌WEY、宇通公司某中巴車導入該產品實現量產;延伸閱讀:技術解讀ADAYO
  • 凌度聲控觸摸流媒體後視鏡A901
    這個假期,凌度攜全新升級語音聲控流媒體A901觸控版 帶你煥新體驗,感受語音聲控的智能時代!聲控流媒體後視鏡A901功能點9.66吋全面屏、語音聲控、前後1080P錄製、5倍視野、破雨破霧、強光抑制、無光夜視、縮時錄影、重力感應、移動偵測、電子狗選配。
  • 「技術流」百度智能雲助力產業拉開「十四五」建設大幕
    第三個十年是留給有準備的「技術流」此刻,諸多信號表明,下一個十年會是智能經濟的時代,產業智能化也將是下一個時代的常態。而在這種常態化的發展中,也將伴隨著諸多新變化出現。值得注意的是,在本期《對話》中,除了百度智能雲作為技術賦能者登場之外,浦發銀行、明陽智慧能源集團此類傳統產業的頭部代表作為產業的轉型者也加入到了未來智能經濟時代的探索。
  • 抖音天空變幻技術流怎麼拍?天空變幻技術流拍攝方法分享[多圖]
    天空變幻技術流怎樣拍攝?天空色彩搭配,實現好的改變。通過圖層的疊加,展現不一樣的美景,趕緊來操作一番。在抖音上有很多用戶使用這種方法拍攝出了好看的視頻,其中使用最多的就是「你的名字」當中的經典流星場景,用戶在使用的時候可以將這個場景與真實的場景結合在一起,然後在平臺上使用,拍攝出好看的視頻和鍾照片,這樣使用起來就會更加的方便,有興趣的用戶可以在這個平臺上一起來使用吧 抖音天空變幻技術流怎麼拍?
  • 95後為核心,音樂流媒體平臺成為日音在華推廣第一選擇
    如今,在中國音樂產業尤其是音樂流媒體平臺的崛起,成為助推日本音樂產業數位化轉型重要力量,和2015 年以來中日音樂人之間演出交流越來越多的背景下。我們有必要對日本音樂產業的整體概況以及在中國的推廣現狀進行研究總結,且希望此報告能夠增進共同促進兩國音樂文化的交流與發展。
  • 限流是什麼意思,自媒體短視頻限流是什麼意思,被軟體限流怎麼辦
    相信大家在刷抖音或者看一些自媒體視頻的時候,經常會聽到作者說自己被限流了,那麼這裡限流究竟是什麼意思,我們一起來看一下。,當視頻或者文章播放到一定量就會不再推薦,這就是大家說的被限流。那麼在什麼樣的情況下博主才會被限流那,如果不想要被客戶限流,最好發布平臺喜歡的內容,內容質量度比較低,或者非原創內容,或者本身內容存在大量推廣廣告,以及內容標題有爭議,內容觀看會引起別人不適等相關問題,都會被平臺限流,所以大家一定要避免一些坑,防止自己的帳號被限流。
  • BesTV+流媒體戰略推動「進博好物」展品變商品!買好物 就上「B+...
    為了積極承接進博會「全球首發、中國首展」的新產品、新技術、新服務,今年在距離主會場3公裡的上海虹橋進口商品展示交易中心集保稅展示、商品交易、物流倉儲、通關服務於一體,並在第三屆進博會之際首次設立了跨境電商新零售體驗中心,為全球客商提供落地服務,方便消費者選購種類豐富的跨境商品。
  • 流媒體直播應用Periscope又添新特性——支持360度全景觀看
    獵雲網9月13日報導 (編譯:圈圈)現在,流媒體直播應用Periscope可以讓你手機翻過來,觀看全景視頻。流媒體直播應用Periscope本周四在官方博客上對外宣布,Periscope將為直播視頻流提供360度全景支持功能。
  • 媒介之變|《囧媽》線上首映:中國電影將進入流媒體時代?
    而《囧媽》另闢蹊徑,直接越過發行和院線,於網絡端上線,成為第一部春節檔線上首映的電影,同時也成為世界上第一部採用IMAX攝影機拍攝的流媒體電影。且並不是所有電影對於播放媒體都沒有需求,尤其是一些把視覺效果作為重要賣點的大片肯定還是會選擇優先在影院播放。另外,電影製作方還要考慮收益問題:給哪個平臺獨播?這個平臺的市場佔有率怎樣?最終收入和影響力有沒有勝過電影院放映?在網絡播放的盜版保護技術問題尚未解決的情況下,片源上網被盜版的風險極大,是否能有效獲得觀看分紅?重重障礙阻撓了優質大片優先選擇流媒體平臺的步伐。
  • 競價/頭條信息流穿山甲廣告你知道嗎?
    穿山甲廣告聯盟媒體要想做大、做強,就不能局限於利用自己的產品體系廣告,還需整合資源,擴大自己的商業版圖,今日頭條依託數億人日活躍用戶的數據積累、頂尖人工智慧推薦技術,聯合超1000個移動垂直頭部媒體,10多家知名手機廠家及應用創建穿山甲廣告聯盟,全量覆蓋中國網民。
  • 流媒體競爭加劇?2021年Netflix將發行70部電影
    這一舉動突顯了流媒體服務在電影業日益突出的地位。電影名單包括有瑞安·雷諾茲(Ryan Reynolds)、蓋爾·加朵(Gal Gadot)、道恩·強森(Dwayne Johnson)主演的《紅色通緝令》(Red Notice)、有扎克·施耐德執導的殭屍電影《活死人軍團》(Army of the Dead),還有喜劇片《不要抬頭》(Don't Look Up)。
  • 優愛騰之下鮮有「完卵」,內容為核的流媒體沒有長尾
    而Netflix作為流媒體平臺中自製劇最早的開拓者,多年來已經取得非常好的成績。《紙牌屋》《羅馬》都是其代表作,而《羅馬》更是為Netflix在威尼斯電影節捧得金獅獎。並且迪士尼也宣布自己的流媒體平臺即將上線,迪士尼可以說是目前全球擁有最多熱門IP的製作公司,一但真正上線之後,像皮克斯、福克斯,漫威、星球大戰、玩具總動員等IP也必將是國際流媒體的又一巨頭。
  • 流媒體競爭加劇?Netflix今年將發行70部電影
    瀏覽器版本過低,暫不支持視頻播放隨著新冠疫情的持續加重,大多數電影院都關閉了,觀眾也漸漸傾向於在家娛樂,這加劇了流媒體的競爭。這一舉動突顯了流媒體服務在電影業日益突出的地位。電影名單包括有瑞安·雷諾茲(Ryan Reynolds)、蓋爾·加朵(Gal Gadot)、道恩·強森(Dwayne Johnson)主演的《紅色通緝令》(Red Notice)、有扎克·施耐德執導的殭屍電影《活死人軍團》(Army of the Dead),還有喜劇片《不要抬頭》(Don『t Look Up)。
  • 三足鼎立的信息流市場與百度的「二刀流」
    百度「搜索+推薦」雙引擎戰略自實行以來,迅速為其在營收上開疆拓土,兩者互相協同,一直緊扣滿足用戶內容需求的原則:一方面,反映用戶真實需求的搜索,通過大數據整合借AI技術分發內容,實現信息流內容「千人千面」精準閱讀;另一方面,信息流豐富的內容生態,反哺搜索入口實現強效補給。百度「搜+推」的賦能閉環很重要的一點在於用戶的主動搜索與推薦興趣有機結合,從而完成了順暢的閉環流程。