騰訊雲發布多款音視頻通信技術產品,服務全球開發者

2020-12-24 中國經濟網

  12月20日,騰訊2020 Techo Park開發者大會在北京舉行,在主題為「雲上視界,對話未來」的視頻通信雲分論壇上,騰訊雲視頻業務產品總監黃斌攜手多位技術專家共同展示了騰訊在音視頻及通信雲領域的最新產品及技術進展,成為該論壇一大亮點。

  隨著音視頻在線上會議、教學、商業、娛樂等場景的廣泛應用,藉助5G、雲計算、大數據、人工智慧技術,騰訊雲構建了一個完整的音視頻通信產品體系,覆蓋媒體內容生產和音視頻通信的各個環節。

  

  首先,騰訊雲發布了自研編碼器「瑤池V500」和音頻技術方案「騰訊天籟」,為提升音視頻通信質量輸出能力;其次,針對融合通信,騰訊雲發布了TRTC在金融及IOT領域的方案,超低延遲「快直播」產品結束公測,正式規模商用;另外,在內容生產方面,騰訊雲進一步升級多模態內容製作能力,發布AI媒體內容生產平臺智媒,「騰訊雲製作」方案在業務能力、素材模版資源及渠道發布能力方面全面升級;最後,「騰訊臨境」沉浸式媒體解決方案及對應SaaS平臺也在會上正式發布,提供從硬體採集、空間建模、雲端SaaS編輯器到終端展示互動的完整一站式能力。除此之外,視頻雲還發布了視頻雲海外2.0版本,提升全球服務能力。

  首款自研硬體編碼器瑤池V500亮相,助力雲遊戲、超清直播等

  隨著5G時代的到來,雲遊戲、4K/8K高清直播等超高清流媒體應用越發增長迅猛,視頻編碼是決定體驗和成本的關鍵技術。不過,目前市面上的編碼器,通常會為了滿足實時編碼要求,而對編碼工具和算法做大量裁剪和簡化,最終導致壓縮效率低下。

  為解決這個痛點,騰訊雲首款自研H265硬體編碼器瑤池V500把實時編碼器的壓縮效率提高到了一個新的水平。

  騰訊雲架構平臺部視頻研發負責人李雅卿介紹道,在算法上,瑤池V500完整實現了高精度運動搜索、全率失真優化、高效自適應量化等所有主流編碼工具,並融合了騰訊雲軟體編碼器碼率控制等方面的領先技術,壓縮效率優越;在硬體設計上,通過靈活的多核擴展架構、高性能編碼流水線、層級化Memory布局等技術,很好滿足了高吞吐、低時延和實時的要求。

  項目實測,瑤池V500不僅能夠滿足手遊雲遊戲體驗要求,且在相同畫質下相比市面主流方案降低了15%帶寬,如果是在相同帶寬條件下,對畫質的提升效果明顯。

  

  (騰訊雲瑤池V500與市面主流方案在手遊雲遊戲中的畫質對比)

  除了雲遊戲之外,騰訊雲瑤池V500硬體編碼器也適用於高清直播場景。直播場景與雲遊戲場景不同,直播對延時要求不敏感,因此算法優化空間更大。經實測,瑤池V500在直播場景下壓縮效率的優勢能提升30%,相同帶寬下面畫質提升更加明顯。

  

  「騰訊天籟」讓你「聽得見、聽得清、聽得真」

  解決了視頻的畫面問題,緊接著是聲音。騰訊天籟實驗室專家研究員肖瑋介紹,「騰訊天籟」是騰訊面向實時音視頻會議的新一代實時音頻技術產品,為了解決實時音視頻會議場景下的各種挑戰,騰訊天籟以『聽得見、聽得清、聽得真』為目標,打造了一整套圍繞音頻通信核心體驗的技術體系。

  從生活場景體驗來看,實時音視頻會議面臨諸多挑戰,如接入設備的差異性、接入場景的複雜化、通話環境的多樣化、多人同場地通話、噪聲消除,以及網絡環境的穩定性等等。

  對此,「騰訊天籟」依靠信號處理和深度學習提升聲音質量採集上界,同時強化了弱網下的質量保障;相關技術已經在包括騰訊會議的諸多產品中獲得應用。例如在聲音採集方面,騰訊會議的AI降噪,能夠適應多種噪聲環境下語音增強任務,提供高質量通話效果;騰訊會議採納自研的cPLC、cFEC技術,能夠在連續120ms突發丟包或者大丟包等場景保持通話連續性。此外,藉助本次Techo Park開發者大會,騰訊天籟實驗室,也對外發布了《音頻聯合信源信道編碼技術白皮書》。

  智媒時代來臨,騰訊雲AI技術讓內容生產更智能

  騰訊多媒體實驗室總監李松南介紹了AI媒體內容生產平臺「智媒」。「智媒」具備自動作詞、視頻增強、橫屏轉豎屏、視頻剪輯、視頻配樂、智能封面等能力,部分功能已開始服務於騰訊雲上的明星產品,如騰訊明眸和騰訊智眸。

  以視頻剪輯為例,利用AI結合多模態,可實現體育、遊戲、影視等場景的精彩視頻生成。「例如足球視頻,我們可以把一場足球比賽按照不同的事件進行拆分,還可以把射門、慢動作、進球等事件拼接起來,自動生成一段針對一場足球比賽的精彩集錦。」李松南介紹道。

  此外,AI技術可以識別圖片或視頻中的人物、動作等信息,自動生成文字描述,當前可完成通用、電商、遊戲領域的自動描述,各種領域均可定製。同時還支持自定義語言風格,使其符合標題、摘要、彈幕、解說等各種場景的表達習慣。

  騰訊實時音視頻TRTC和快直播LEB迭代升級

  騰訊實時音視頻產品TRTC為開發者提供可快速搭建的低成本、低延時、高品質的互動解決方案,助力企業將線下活動、會議無縫遷移到線上。

  據騰訊雲終端產品中心高級工程師蔣磊介紹,騰訊實時音視頻通信TRTC針對多人互動深度優化,全球端到端延時低於300ms,實測抗丟包率超過 40%,抗網絡抖動超過 1000ms,超低延遲大房間支持10萬人在線。

  此外,TRTC還採用了騰訊自研的領先行業的實時音頻引擎TRAE,具備優秀的3A處理效果,出眾的音效處理能力,突出的性能優勢,為包括 QQ、微信、全民K歌、QQ音樂等在內的各類 APP提供音頻底層技術。

  

  隨後,蔣磊還展示了「快直播方案LEB」。據了解,國內傳統直播主要採用RTMP、HTTP-FLV、HLS這幾種傳輸協議,一般會出現3~20秒的延時,特殊的場景比如活動賽事直播這種不強調互動性而是要求流暢性的直播延時通常在10秒以上。

  騰訊雲快直播兼容標準WebRTC並對WebRTC協議進行了多項優化升級,將直播延遲降低至百毫秒級,同時兼顧秒開、卡頓率等核心指標,優化直播體驗。不僅如此,快直播兼容目前騰訊雲標準直播的全部功能,推流、轉碼、錄製、截圖、鑑黃、播放全功能支持,能夠滿足現有標準直播業務平滑遷移。只需一步即可從標準直播升級到快直播(超低延遲直播),騰訊雲快直播現已結束公測期,全面正式商用。

  騰訊視頻雲海外媒體方案2.0發布,雲+端一體化、超低延遲、Mediaservice全面上線

  面對日益增加的海外媒體服務需求,騰訊視頻雲海外媒體方案2.0發布。

  騰訊視頻海外媒體方案2.0主打三大新方向升級:完善「雲+端」一體化方案、超低延遲直播全球部署、媒體服務系列新產品Mediaservice全面上線。

  目前雲+終端一體化解決方案全面上架國際站,極具騰訊雲特色的移動直播SDK、短視頻SDK、美顏特效SDK全面上線國際站,為海外用戶提供「雲+端」全鏈路一體化解決方案。而超低延遲直播(快直播)也已正式在海外上線部署,將為海外客戶提供百毫秒級的直播新體驗。

  媒體服務系列三大新產品(MediaLive MediaPackage MediaConnect)正式在海外上線,能為客戶提供極致的轉碼、封裝、全球傳輸新能力,提供海外OTT場景下的全新解決方案。媒體服務系列新產品覆蓋了多種海外常見傳輸或音視頻協議,支持7x24小時極致穩定性能,極速高清智能轉碼更是最多可達到30%視頻壓縮率。

  此外,騰訊雲在全球部署了超過2000個CDN的節點和超過120T的儲備帶寬,支持RTP/SRT/HLS/DASH等8種海外常見傳輸或音視頻協議支持能力,目前騰訊視頻雲已經部署全球60多個國家和地區。

  騰訊雲製作能力全面升級,助力內容創作

  騰訊雲製作也進行了全面升級,這是騰訊雲面向內容製作領域,推出的製作雲SaaS產品,為視頻內容創作提供了一套「採集-傳輸-雲端導播-視頻編輯-剪輯-雲端分發」全生命周期解決方案。

  此次發布的騰訊雲製作產品,提供騰訊獨家版權素材庫、創意模板庫和AI工具箱,除了升級視頻剪輯業務功能外,還支持一鍵分發至企鵝號,新浪微博,快手等媒體平臺。

  

  與此同時,騰訊雲製作還升級了業務模式,除了0研發投入、0代碼接入,2天的急速交付模式讓客戶低成本且快速擁有自己的整套視頻創意網站,上線團隊管理模塊與行業模板還可提高管理效果和客戶使用效果。

  騰訊臨境打造沉浸式空間體驗

  騰訊臨境為視頻雲團隊針對企業級營銷提供的全新一站式沉浸式解決方案,依託多硬體採集支持、空間建模能力、實時通訊/客戶呼叫中心等營銷能力集成,覆蓋客戶需要的多樣場景,支持多平臺終端打造沉浸式新體驗。能夠助力企業快速實現VR沉浸式營銷方式,帶給用戶全真網際網路新體驗。

  此外本次臨境還新發布了臨境SaaS平臺產品,平臺能夠為採集完成後的模型輕鬆疊加營銷觸達能力,具有操作簡單、營銷功能全面、模型管理、多平臺分發四大特點,讓用戶的沉浸式營銷變得更加簡單易用。

  例如,國際文博會騰訊VR展廳,打破了時空的限制;「雲上濱海」VR展廳使更多人可以參觀到騰訊濱海大廈展廳,通過實時VR帶看講解功能,用戶可以了解騰訊的文化產業內容和理念。線上參觀的方式降低了物質成本,打破了實體展廳人數限制的弊端,可容納參觀人數無上限,「一對多」的互動講解方式也提升了接待效率。

  隨著5G、邊緣計算等新興技術的發展,音視頻技術正改寫電商、教育等行業的發展模式。騰訊雲將持續迭代音視頻及通信技術,交付高質量、高穩定性及高性價比的技術服務回饋客戶與合作夥伴的信任,助力各行業創新發展與變革。

相關焦點

  • 騰訊雲全新發布音視頻技術產品,助力各行業智能化發展
    12月20日,騰訊2020 Techo Park開發者大會在北京舉行,在主題為「雲上視界,對話未來」的視頻通信雲分論壇上,騰訊雲視頻業務產品總監黃斌攜手多位技術專家共同展示了騰訊在音視頻及通信雲領域的最新產品及技術進展,成為該論壇一大亮點。
  • 騰訊視頻通信雲發布全新系列產品,構建業界最完整音視頻產品矩陣
    9月11日,在騰訊2020全球數字生態大會音視頻通信專場上,騰訊雲升級了視頻雲4.0,發布在視頻製作、電商直播和海外媒體的三大重磅新品,並宣布啟動V加俱樂部計劃,攜手音視頻領域合作夥伴共創百億價值。為了滿足電商直播場景的多種業務需求,騰訊雲推出的這套電商直播解決方案,整體依託騰訊雲多款音視頻和即時通信的產品能力,提供從開播推流、雲端音視頻處理能力,在保障電商直播流程流暢的同時,打通H5、App以及小程序端,為直播電商提供實時美顏、彈幕、優惠劵、商品連結等能力,打造了業界最完整的直播帶貨一體化方案。
  • 視頻雲4.0升級發布,騰訊雲構建業界最完整音視頻產品矩陣
    9月11日,在騰訊2020全球數字生態大會音視頻通信專場上,騰訊雲升級了視頻雲4.0,發布在視頻製作、電商直播和海外媒體的三大重磅新品,並宣布啟動V加俱樂部計劃,攜手音視頻領域合作夥伴共創百億價值。>騰訊雲視頻業務產品總監黃斌透露,經過二十多年在音視頻領域的創新性探索,目前,騰訊雲已經構建起業界最完整和最具競爭力的音視頻產品矩陣。
  • 左手技術右手生態,騰訊雲持續深耕音視頻及通信賽道
    12月20日,在Techo Park開發者大會視頻通信雲分論壇上,騰訊技術專家及在線教育、電商、地產經紀、to B技術服務等行業領軍人物分享了音視頻領域前沿技術、行業應用實踐等內容。與此同時,現場還發布了騰訊雲音視頻通信技術產品。
  • 融雲實時音視頻落地各應用場景以RTC+IM雙重能力服務開發者
    為解決部分開發者的實際需要,融雲適時升級了實時音視頻產品,並推出了「IM即時通訊+實時音視頻+推送」一體化解決方案,就是要「以一套SDK解決所有通信場景」,滿足多場景下的高品質通信的需求,成為下一代RTC的創領者。
  • 騰訊雲視頻技術全面升級 明眸、Tencent-RTC首度亮相
    5月23~24日,2018騰訊雲+未來峰會在廣州開幕。作為本屆大會的重要議程之一,以「智繪視界、樂享未來」為主題的騰訊視頻雲分論壇引發了業內格外關注。峰會上,騰訊雲正式發布音視頻AI、Tencent-RTC、短視頻服務三大產品,全方位構建了大視頻生態體系。
  • 騰訊多媒體實驗室的完整音視頻技術棧
    在音視頻圈子裡,最近熱門話題不少,譬如視頻體驗聯盟的四屆一次全會,譬如拉斯維加斯的2020 CES展,再譬如騰訊雲最新發布的一款雲視頻會議產品。事實上,在音視頻技術的落地上,騰訊做了很多,雲視頻會議產品只是其中之一。而背後依傍的,就是騰訊多媒體實驗室,其專注於多媒體技術領域的前沿技術探索、研發、應用和落地,包含實時音視頻、編解碼和網絡傳輸,基於信號處理和深度學習的多媒體內容處理、分析、理解和質量評估,沉浸式媒體(VR、AR、點雲等)系統設計和端到端解決方案。
  • 最低延遲66ms,融雲帶來更流暢的實時音視頻服務體驗
    繼融雲實時音視頻3.0上線運行一年後,全球領先的網際網路通信雲服務商融雲在近期宣布對實時音視頻服務進行全面升級。通過「IM即時通訊+實時音視頻+推送」的一體化解決方案,「用一套 SDK ,解決所有通信場景」,打造一流的實時音視頻服務,獲開發者極大關注。
  • 騰訊雲交出階段性年終總結,發布5G產品矩陣
    12月19日至20日,騰訊2020 Techo Park開發者大會上,騰訊雲宣布將圍繞成本、安全等維度加大基礎設施投入規模和自研技術創新力度,通過構建雲、邊、端一體化產品和服務體系,為開發者一站式提供設計、開發、測試、運維完整產品矩陣,助力開發者提升效率,快速上雲。
  • 騰訊雲交出階段性年終總結,發布5G產品矩陣
    12月19日至20日,騰訊2020 Techo Park開發者大會上,騰訊雲宣布將圍繞成本、安全等維度加大基礎設施投入規模和自研技術創新力度,通過構建雲、邊、端一體化產品和服務體系,為開發者一站式提供設計、開發、測試、運維完整產品矩陣,助力開發者提升效率,快速上雲。
  • 視頻雲4.0四大產品全新發布,覆蓋電商、遊戲等多種應用場景
    9月11日,在騰訊2020全球數字生態大會音視頻通信專場上,騰訊雲升級了視頻雲4.0,發布在視頻製作、電商直播和海外媒體的三大重磅新品,並宣布啟動V加俱樂部計劃,攜手音視頻領域合作夥伴共創百億價值。為了滿足電商直播場景的多種業務需求,騰訊雲推出的這套電商直播解決方案,整體依託騰訊雲多款音視頻和即時通信的產品能力,提供從開播推流、雲端音視頻處理能力,在保障電商直播流程流暢的同時,打通H5、App以及小程序端,為直播電商提供實時美顏、彈幕、優惠劵、商品連結等能力,打造了業界最完整的直播帶貨一體化方案。
  • 騰訊雲Techo開發者大會將召開 5000位極客共享技術盛宴
    雲、物聯網、5G、人工智慧……一項項技術的突破帶來了天翻地覆的變化,開發者們是如何一次次地進行天馬行空的創意和極限突破? 2019年11月6日-7日,由騰訊雲主辦的首屆Techo開發者大會將在北京嘉裡大酒店召開。本次大會將聚集來自全球5000多位開發者,並邀請超140位業界大咖圍繞前沿技術發展進行分享和交流,是一次真正面向全球雲計算領域開發者和技術愛好者的年度盛會。
  • 騰訊雲音視頻技術支撐遠程會議在線課堂 流量帶寬實現倍增
    老師正在用騰訊教育在線課堂產品上課中新網2月24日電 疫情期間,遠程會議、在線課堂等業務井噴帶來了音視頻流量的急劇增長。騰訊雲視頻業務總經理李鬱韜日前透露,疫情期間騰訊雲在音視頻領域的整體流量帶寬實現翻倍增長。
  • 騰訊雲副總裁王慧星:構建完整的開發者產品矩陣,助力企業高效上雲
    騰訊雲將圍繞成本、安全、創新、工具,以及智能等維度,持續加大基礎設施投入規模和自研技術創新力度,通過構建雲、邊、端一體化產品和服務體系,為千百萬開發者一站式提供設計、開發、測試、運維完整產品矩陣,助力開發者提升效率,快速上雲。
  • 融雲 X- Meetup 技術沙龍廣州站:全球通信雲技術分享
    近日,以&34;為主題的2020 融雲 X-Meetup 技術沙龍廣州站在穗開幕。融雲 CTO 楊攀、融雲高級工程師李宏博、荔枝 IaaS 架構師餘程、悅跑圈 CTO 錢榮明等眾位技術大咖和開發者們共聚一堂,分享和討論網際網路通信雲技術的最新發展趨勢,並結合實踐經驗來詳細解讀 IM 即時通訊、實時音視頻等技術在全球化布局中的技術心得和快速落地經驗。
  • 融雲X- Meetup 技術沙龍廣州站:全球通信雲技術實踐分享
    近日,以「全球通信雲技術的發展與探索」為主題的2020 融雲 X-Meetup 技術沙龍廣州站在穗開幕。融雲 CTO 楊攀、融雲高級工程師李宏博、荔枝 IaaS 架構師餘程、悅跑圈 CTO 錢榮明等眾位技術大咖和開發者們共聚一堂,分享和討論網際網路通信雲技術的最新發展趨勢,並結合實踐經驗來詳細解讀 IM 即時通訊、實時音視頻等技術在全球化布局中的技術心得和快速落地經驗。
  • 融雲作為一體化通信雲廠商典型案例 入選2020全球網際網路通信雲報告
    近日,艾瑞發布了《2020 年全球網際網路通信雲行業研究報告》,指出:網際網路通信雲的核心價值體現在成本優勢和專業優勢兩個層面,IM 與 RTC 發揮協同效應,一體化服務構成了競爭壁壘。
  • 融雲任傑:技術和客戶積累是壁壘,疫情為音視頻行業帶來深遠影響
    首先,技術上存在挑戰。難點在於構建一個全球低延時分布網絡,而融雲通過十幾年的經驗積累已完成了該網絡的系統架構。其次是客戶數量的積累。只有服務了大量國內、海外客戶才能積累起足夠多的網絡節點,從而找到最優的數據鏈路。融雲不僅搭建了穩定的系統架構,讓消息流轉小於100ms,還依據多年的積累,在海外構建了高可靠的全球通信網,實現信息的就近接入及多線備份。
  • 融雲任傑:技術和客戶積累是壁壘,疫情為音視頻行業帶來深遠影響
    首先,技術上存在挑戰。難點在於構建一個全球低延時分布網絡,而融雲通過十幾年的經驗積累已完成了該網絡的系統架構。其次是客戶數量的積累。只有服務了大量國內、海外客戶才能積累起足夠多的網絡節點,從而找到最優的數據鏈路。融雲不僅搭建了穩定的系統架構,讓消息流轉小於100ms,還依據多年的積累,在海外構建了高可靠的全球通信網,實現信息的就近接入及多線備份。
  • 線上教學交付能力背後,在線音視頻通信技術成剛需
    在「全民網課」的時代,教學效果的保證離不開高質量的音視頻信息傳遞、全方位的及時互動和多維度的數據分析。然而這些對於教培機構,尤其是以教學見長的線下機構,都並不熟悉。全球通信雲服務商融雲CPO任傑表示:「在網際網路時代,教育創業者應該聚焦自己的核心業務邏輯,而不是去關心通用型能力的實現。」