Techo Park開發者大會召開,騰訊天籟實驗室發布《聯合信源信道編碼...

2020-12-24 金融界

來源:經濟日報-中國經濟網

12月19日至20日,由騰訊主辦的2020Techo Park開發者大會於北京順利召開。本次大會匯聚了全球頂尖行業專家和技術愛好者,聚焦音視頻、大數據、人工智慧、5G邊緣計算及物聯網等眾多熱點技術話題展開深度探討。

2020年突如其來的疫情,讓數字通信成為人與人溝通的重要手段,同時也對實時音視頻通信的穩定性和通訊效果帶來了極大考驗。在網絡傳輸過程中,實時音視頻通信需要面對用戶體驗、運營成本的雙重約束。

會上,騰訊天籟實驗室專家研究員肖瑋發布了《聯合信源信道編碼技術白皮書》,結合信源、信道的聯合優化策略,綜合經典信號處理和深度學習新技術的騰訊天籟聯合信源信道編碼方案,目前該方案已在騰訊會議等億級產品中進行驗證,在保障用戶體驗的同時,顯著降低帶寬和延時。

騰訊天籟實驗室專家研究員 肖瑋

後疫情時代,實時音視頻通信面臨用戶體驗和運營成本雙重考驗

2020年疫情突如其來,在線辦公、在線教育等需求的增加,對實時音視頻通信(RTC)的穩定性和通訊效果提出了極大考驗。由於業務量激增,在保障用戶體驗方面,RTC業務面臨著諸多困難,包括但不限於通話質量、最小化卡頓、端到端延時、帶寬成本等。在網絡傳輸過程中,RTC方案需要面對用戶體驗、運營成本的雙重約束,挑戰很大。

肖瑋對RTC複雜的鏈式系統進行了介紹,以單側的發送端到接收端通信為例,RTC要經過採集、前處理、編碼、傳輸、解碼、增強、回放等多個階段,每個階段都會影響最終體驗。從端到端到角度,影響通話體驗的因素,可以分成信源和信道(鏈路)兩個部分。採集端只有完整地將信源傳輸到接收端,用戶才能獲得高質量體驗;否則,如果中間數據包丟失了,就會發生聲音卡頓等現像。

端到端視角下音頻通話體驗的影響因素

肖瑋強調,RTC業務中,傳輸過程中出現丟包是一個重要的挑戰。因此,網絡抗性提升是RTC業務繞不開的話題。針對網絡抗性問題,主流的RTC解決方案是圍繞信道側方法進行。如果完全依賴信道側方法,實際應用中又面臨著其它問題。一方面,如果網絡抗性完全來自於帶外,將會導致帶寬成本激增;另一方面,重傳等操作意味著要進行包的組合、解析等迭代操作,增加時延。因此,要打造一個好的RTC通話體驗,需要聯合信源和信道,自頂向下地設計系統。

騰訊天籟聯合信源信道編碼方案針對網絡抗性提出三大策略

為了解決以上問題,騰訊天籟實驗室提出了聯合信源信道編碼策略,並發布了《聯合信源信道編碼白皮書》。首先,提升信源側方法的能力上界。相對於標準帶內FEC,新的信源側FEC需要更強的單獨抗性。比如,支持40%丟包率。其二,靈活調用帶外和帶內抗性,以期在抗性穩定性和帶寬消耗上有一個更為靈活的折衷。相關的控制參數,藉助於測試平臺提供的經驗數據進行迭代升級。第三,前向兼容性問題,要保證新舊兩種協議無互通問題。

聯合信源信道編碼基本框架

據肖瑋介紹,騰訊天籟聯合信源信道編碼方案,通過有效地組合信源和信道側的抗性策略,保證用戶體驗的同時,有效降低帶寬和延時成本。值得一提的是,在各種網絡傳輸條件下的測試結果標表明,該方案可以降低帶寬30%;同時,進一步降低延時40-60ms,進一步提升用戶體驗。

目前,騰訊天籟新新技術聯合信源信道編碼方案已經在騰訊會議上線。肖瑋表示,結合了信源、信道的聯合優化策略、結合經典信號處理和深度學習的新技術,將成為未來RTC解決方案中的關注點。此次聯合信源信道編碼方案的發布,也標誌著騰訊天籟實驗室在實時音視頻通信領域的又一個突破性進展。

一直以來,為了解決實時音視頻應用場景下的各種挑戰,騰訊天籟實驗室圍繞音頻通信核心體驗的技術和框架進行了深入的探索。在今年9月舉辦的騰訊全球數字生態大會上,正式發布了「面向實時音視頻應用的新一代實時音頻技術品牌」――騰訊天籟。

肖瑋表示,騰訊天籟技術和聯合信源信道編碼方案僅僅是一個開始,未來,騰訊天籟實驗室將繼續鑽研音視頻新技術為滿足更多行業場景下的實時音視頻需求,推進更多更豐富的場景落地而努力。

相關焦點

  • 騰訊Techo Park開發者大會召開,發布雲原生線路圖、雲梯計劃
    智東西(公眾號:zhidxcom)編輯 |年華智東西12月19日消息,騰訊Techo Park開發者大會正式召開,發布雲原生線路圖、雲梯計劃等產品和戰略。二、聯合六家單位發布SuperEdge開源項目為建立基於容器的邊緣計算基礎設施標準,化解當前標準缺失的局面,加速邊緣計算行業的發展,騰訊雲聯合 Intel、VMware、虎牙、寒武紀、美團、首都在線,共同發布 SuperEdge 邊緣容器開源項目。
  • 騰訊Techo Park開發者大會正式召開,重磅發布雲原生線路圖、雲梯計劃
    (原標題:騰訊Techo Park開發者大會正式召開,重磅發布雲原生線路圖、雲梯計劃)
  • 騰訊Techo Park開發者大會正式召開,發布雲原生線路圖、雲梯計劃
    12月19日,在北京舉行的騰訊2020 Techo Park開發者大會上,圍繞新形勢下的技術變革與趨勢,騰訊雲展示了其在雲計算、大數據、人工智慧等眾多領域的最新技術、最新成果、以及最佳實踐。聯合六家單位發布SuperEdge開源項目為建立基於容器的邊緣計算基礎設施標準,化解當前標準缺失的局面,加速邊緣計算行業的發展,騰訊雲聯合 Intel、VMware、虎牙、寒武紀、美團、首都在線,共同發布 SuperEdge 邊緣容器開源項目。
  • 騰訊Techo Park開發者大會下周啟幕,花樣程式設計師、動手實驗室等活動...
    2020年,備受開發者和技術愛好者期待的一場年度盛會——騰訊Techo Park開發者大會,將於12月19日至20日在北京召開。大會將邀請全球200多位頂尖行業專家和數千位參與者,共同探討雲計算、大數據和人工智慧等前沿技術話題。
  • 騰訊雲Techo開發者大會將召開 5000位極客共享技術盛宴
    雲、物聯網、5G、人工智慧……一項項技術的突破帶來了天翻地覆的變化,開發者們是如何一次次地進行天馬行空的創意和極限突破? 2019年11月6日-7日,由騰訊雲主辦的首屆Techo開發者大會將在北京嘉裡大酒店召開。
  • 騰訊多媒體實驗室商世東:天籟技術讓人工耳蝸語音清晰度和可懂度...
    9月27日,值國際聾人日之際,騰訊多媒體實驗室聯合騰訊公益慈善基金會、深圳市信息無障礙研究會等機構召開發布會,宣布發起「天籟行動」,面向公益開發者、設備廠商、相關機構開放騰訊天籟AI音頻技術,應用於聽障人群無障礙建設等相關社會責任領域。會上,騰訊多媒體實驗室高級總監商世東發表了《AI,讓天籟無界》的主題演講,分享了騰訊天籟AI音頻技術研發的原理及應用。
  • Techo開發者大會,騰訊優圖分享最新研究成果和產業實踐
    12月19日-20日,由騰訊發起的2020 Techo Park開發者大會於北京順利召開。其中人工智慧專場以「人工智慧算法與最佳實踐」為主題,為開發者、業界及生態夥伴呈現了雲計算時代下人工智慧領域的最新前沿技術與最佳行業實踐。
  • 騰訊Techo Park開發者大會無邊界計算分論壇:讓公有雲的算力無限...
    (原標題:騰訊Techo Park開發者大會無邊界計算分論壇:讓公有雲的算力無限延伸 接入隨處可得)
  • 華為召開2019開發者大會,乾貨滿滿,日程表如下
    華為宣布8月9日至8月11日將面向全球開發者召開2019年開發者大會,地點在東莞松山湖華為基地。這是一次在華為大本營舉行的盛會,與其說是盛會,不如說是慶典。類似蘋果一年一度的WWDC開發者大會,華為將在這次大會中發布鴻蒙OS的更多細節,甚至有可能直接發布鴻蒙OS。雖然美國對華為的限制已經被迫鬆口,但是危機感一直都在。只有自己有底氣,才能在國際舞臺上挺直腰杆。
  • 騰訊Techo Park開發者大會 5G時代,企業如何更好獲得公有雲一樣的...
    12月19-20日,騰訊Techo Park開發者大會在北京舉行,200多位行業頂尖專家和5000多名開發者齊聚一堂,共同探討雲計算、大數據和人工智慧等前沿技術話題,並同步舉辦30多場分論壇交流,超百萬用戶也通過線上和線下方式參與到這場技術研討的年度盛會。
  • 騰訊Techo Park開發者大會區塊鏈分論壇:騰訊雲區塊鏈平臺助力產業...
    12月20日,騰訊Techo Park開發者大會分論壇「數字文明的信任框架」在京召開。騰訊雲區塊鏈領域專家劉長輝、北京微芯區塊鏈與邊緣計算研究院副院長任常銳等業界大咖,以及多家企業合作夥伴齊聚一堂,圍繞區塊鏈現狀、演進方向和前沿技術等話題展開交流探討。
  • 騰訊雲首次發布企業雲原生路線圖,並針對高校開發者發布「雲梯計劃」
    來源:藍鯨財經藍鯨TMT頻道12月19日訊,在騰訊2020 Techo Park開發者大會上,騰訊雲發布企業雲原生最佳實踐路線圖、SuperEdge 邊緣容器開源項目、八大雲原生系列新品、以及騰訊雲未來開發者雲梯計劃等。
  • ...AI產業未來——騰訊智能客服受邀出席AIIA2020人工智慧開發者大會
    9月28—29日,「2020 AIIA人工智慧開發者大會」在北京舉辦。本屆大會以「智慧築基,源聚強國」為主題,聚焦人工智慧技術、產業和應用領域的最新進展和熱點。大會上,人工智慧產業聯盟聯合中國信息通信研究院發布了智能化分級、可信和Benchmark評測結果,在智能化分級-自然語言處理評測中,騰訊智能客服獲得了智能客服系統「功能增強型」與「性能良好型」雙重專業認證,得到了業界的高度認可。
  • 2019軟體綠色聯盟開發者大會盛大開幕,聯盟聯合泰爾終端實驗室發布...
    11月19日,以「構生態·建未來」為主題的2019軟體綠色聯盟開發者大會在北京國家會議中心盛大開幕,現場2000+開發者與會。會議期間,聯盟聯合泰爾終端實驗室共同發布了一系列創新成果,其中包括《移動網際網路應用IPv6網絡兼容性測試規範》及測試雲平臺、《摺疊屏移動智能終端白皮書》、以及國內首份《移動終端原子化服務標準》於此重磅發布。工業和信息化部信息通信發展司網絡發展處梅傑調研員到會致詞。
  • 2020騰訊遊戲開發者大會落幕
    12月10日,由騰訊遊戲學院舉辦的第四屆騰訊遊戲開發者大會(Tencent Game Developers Conference,簡稱TGDC)落幕。在為期4天的大會裡,30多位來自國內外的一線遊戲從業者、相關學者和專家等,分享了他們對於遊戲設計、研發、發行和價值探索等方面的獨特洞見,以及在前沿技術應用、產業基礎研究等領域的經驗成果。
  • Techo Park聚焦前沿安全技術,騰訊安全攜手中科院、滴滴披露重磅...
    在12月20日北京舉行的2020 Techo Park開發者大會上,由騰訊安全主辦的「揭秘前沿安全技術」分論壇匯聚了來自中國科學院信息工程研究所、頂級開源項目Rizin團隊、滴滴出行、騰訊安全雲鼎實驗室等國內外多位安全專家,攜手帶來了二進位安全、AI+安全、漏洞挖掘等多項安全研究成果,共同推進億萬用戶數據安全生態建設。層出不窮的軟體漏洞如何實現規模化檢測?
  • 世界網際網路大會領先科技成果巡禮:騰訊安全玄武實驗室「阿圖因...
    第四屆世界網際網路大會日前發布了世界網際網路領先科技成果。騰訊安全玄武實驗室與中國科學院計算所大數據安全組聯合研發的「阿圖因」軟體空間安全測繪系統,成功入選了本屆大會發布的58項世界網際網路領先科技成果,被載入大會官方發布的《科技之魅》一書。
  • 2020 Techo Park:騰訊安全攜手全球頂級安全專家揭秘前沿安全技術
    在12月20日北京舉行的2020 Techo Park開發者大會上,由騰訊安全主辦的「揭秘前沿安全技術」分論壇匯聚了來自中國科學院信息工程研究所、頂級開源項目Rizin團隊、滴滴出行、騰訊安全雲鼎實驗室等國內外多位安全專家,攜手帶來了二進位安全、AI+安全、漏洞挖掘等多項安全研究成果,共同推進億萬用戶數據安全生態建設。   層出不窮的軟體漏洞如何實現規模化檢測?
  • 「Game 4 Change」,2020騰訊遊戲開發者大會開啟限量報名
    2020年12月7日~10日晚19點至23點,由騰訊遊戲學院舉辦的第四屆騰訊遊戲開發者大會(Tencent Game Developers Conference,簡稱 TGDC)將在線上舉行。
  • 2020 騰訊遊戲開發者大會圓滿落幕:Game 4 Change,為遊戲人打造更...
    【天極網IT新聞頻道】12月10日,由騰訊遊戲學院舉辦的第四屆騰訊遊戲開發者大會(Tencent Game Developers Conference,簡稱 TGDC)圓滿落幕。   浙江大學騰訊遊戲智能圖形創新技術聯合實驗室主任金小剛,分享了基於符號距離場的實時動態漫反射全局光照計算的方法,其核心是使用符號距離場構造輸入場景的簡單幾何表示,然後利用空間離散樣本探針,在空間域重建輻照度的函數。