騰訊多媒體實驗室受邀參加Audiokinetic Wwise全球巡演會,展示遊戲...

2020-12-11 手機鳳凰網

近日,騰訊多媒體實驗室受邀參加Audiokinetic Wwise全球巡演會。巡演會上,騰訊多媒體實驗室團隊展示了遊戲多媒體引擎(GME)聯合解決方案。該解決方案由騰訊雲GME團隊、騰訊多媒體實驗室和Audiokinetic聯合打造,面向遊戲開發者提供遊戲內語音通信服務,提供端到端、低延遲、高質量、高穩定、可彈性擴容、性價比高的遊戲語音通信服務,接入門檻低,可幫助遊戲開發者在多種遊戲場景下快速搭建實時語音服務,助力遊戲社交化。

(騰訊多媒體實驗室高級總監商世東,在Audiokinetic Wwise巡演會西雅圖站 展示GME)

(騰訊多媒體實驗室專家工程師高鵬,在Audiokinetic Wwise巡演會上海站 展示GME)

巡演會期間,來自全球各地的眾多遊戲開發者親身體驗了GME demo。知名遊戲工作室如Tango gameworks、XFLAG、Super Trick Games、Noisycroak等在體驗後均表示了合作興趣。「PC實時語音3D、移動端的實時混響及變聲,剛體驗了這些demo,利用GME我們能夠在Wwise編輯器裡直接集成語音模塊,使用起來非常方便,而且可以激活很多新的玩法。」一位遊戲開發者在巡演會上海站體驗了GME demo後表示。

(巡演會現場,遊戲開發者線下體驗GME demo)

作為業內最專業的遊戲音頻引擎開發廠商之一,索尼互娛旗下的Audiokinetic主要為遊戲開發者提供遊戲音頻引擎服務,憑藉卓越的技術實力和豐富的行業經驗,Audiokinetic 為互動媒體、遊戲、線下實體場館娛樂和汽車行業樹立了新的音頻製作標準。為了不斷促進與遊戲開發商的交流和合作,Audiokinetic 每年在全球多個城市舉辦 Wwise 巡演會。在備受期待的 Wwise 巡演會活動期間,業內一些頂尖遊戲音頻團隊會為大家揭秘遊戲幕後製作,分享項目設計與開發經驗,並展示其創新思維和技術思路。

今年五月騰訊全球數字生態峰會上,Audiokinetic與騰訊雲籤署了戰略合作協議,此次戰略合作中的一項重要內容便是雙方基於騰訊遊戲語音解決方案GME和Audiokinetic公司旗下最知名的遊戲音頻引擎Wwise打造的Wwise+GME聯合解決方案。

經常用電腦/手機玩吃雞的朋友,應該不會對語音與音頻衝突的問題感到陌生——使用語音交流時,就很難聽清遊戲中的槍聲/腳步聲,從而影響反應速度。為了解決這一問題,各大遊戲公司都不惜血本去優化遊戲音效試圖提供更高品質的遊戲體驗,但卻對此無能為力,為了攻克這一難題,Wwise+GME聯合解決方案便應運而生。

在聯合方案中,語音和遊戲音效的設計得到了很好的融合,開發者可以通過Wwise引擎在遊戲中方便快速的集成語音服務,不但從根本上解決了前述的技術難題,並且可以創造出和遊戲實際場景更加符合的語音聊天玩法,從而極大的加強了玩家的遊戲體驗。在實際Wwise工程的設計中,主要是上行和下行兩條語音通路。

在上行鏈路中,玩家本地的聊天語音流會通過「GME聲音採集插件」發送給Wwise,基於Wwise提供的DSP處理和空間定位功能,遊戲端會根據玩家所處的實際環境和需求來對語音流進行處理。處理後將帶有特定場景位置信息的語音流,通過「GME網絡發送插件」發送至部署在雲端的伺服器中,進而發送到遠端玩家的終端。

在下行鏈路中能夠收到所有隊友的多路語音流,此時遊戲端根據每一路接收語音在遊戲中的實際情況,在「GME網絡接收插件」接收語音流後,將語音流通過Wwise進行處理,然後通過「GME播放插件」在本地設備播放,從而讓玩家享受到實時、清晰且具有方位感的語音聊天服務,有效解決了語音與遊戲音頻衝突的問題。

在這一技術的支持下,遊戲音頻設計師只需在Wwise編輯器裡將上行和下行的鏈路結構搭建好,建立Event來控制兩條語音鏈路的開始、停止、暫停和恢復等操作,然後為各個平臺生成SoundBank聲音庫,遊戲開發人員在需要的時候只需拋出對應的事件就可以控制語音的開啟與關閉。通過GME和Wwise引擎的數據流交互,遊戲邏輯就可以像處理普通遊戲中的聲音一樣,來根據遊戲場景處理語音數據,規避玩家在實時語音時音量類型跳變的情況發生。

Wwise+GME聯合解決方案的推出,一舉填補了Wwise引擎在語音社交方面的不足。打通遊戲音效與遊戲內語音這兩條獨立線路的解決思路,徹底根除了玩家在音效和語音通信之間進行取捨的難題,成功連接了遊戲開發者和音頻製作者,為整個遊戲的聲音開發提供了一整套的解決方案。在展會進行過程中,與會的開發者在觀看聯合解決方案的demo後,紛紛表示通過Wwise集成GME語音是非常方便且直接的,能夠有效降低其工作負擔,快速解決技術挑戰,從而贏得廣大玩家和市場的認可。

作為騰訊旗下頂尖的音視頻通信和處理研發團隊,騰訊多媒體實驗室專注於實時音視頻通信、音視頻編解碼前沿算法研究、音視頻國際標準、計算機視覺圖像處理、端到端音視頻質量評測。在實時音視頻通信和處理技術、音視頻國際標準等領域積累了完整的解決方案和領先的技術水平。

相關焦點

  • 騰訊多媒體實驗室的完整音視頻技術棧
    如果說視頻體驗聯盟四屆一次全會,主要是對2020年音視頻技術研發方向的定調,那2020 CES展就是音視頻新技術的集中展示,而騰訊的雲視頻會議產品,則是新技術的切實落地。不再只停留在概念階段,而是從實驗室走出來,落地到「提升企業運轉效率、驅動行業發展」這件事情上來。
  • 2020 Techo開發者大會召開,騰訊多媒體實驗室推出AI媒體內容生產...
    在視頻通信雲分論壇上,騰訊多媒體實驗室總監李松南進行了《智媒-多模態與內容生產》的主題分享。作為騰訊旗下頂尖科技實驗室,也是全球多媒體技術的領先者,智慧媒體是騰訊多媒體實驗室的重點研究領域之一。李松南表示,近期多媒體實驗室推出了AI媒體內容生產平臺——智慧媒體,可以通過搭建基於跨模態(圖像、音頻、文本、語音)算法的多媒體內容分析和理解框架,實現媒體標籤、分類、檢測、摘要、內容描述等功能。論壇上,李松南重點介紹了智慧媒體的內容生產。
  • 騰訊開源首款H.266播放器!專訪背後「天團」騰訊多媒體實驗室
    以變換為例,在H.265/HEVC中主流是用DCT-2,而在VVC裡,不同場景會用到不同的變換,效果會更好。 但是新的變換包括DST-7之前並沒有很好的算法,DST-7在H.265的時候不是影響很大,是因為它只有4×4大小,現在有32×32大小的,這個矛盾就更突出了。騰訊多媒體實驗室在保持壓縮性能的情況下,把DST-7等算法的複雜度降下來,做出了重要貢獻。
  • 騰訊多媒體實驗室推出AI媒體內容生產平臺「智媒...
    作為騰訊旗下頂尖科技實驗室,也是全球多媒體技術的領先者,智慧媒體是騰訊多媒體實驗室的重點研究領域之一。李松南表示,近期多媒體實驗室推出了AI媒體內容生產平臺——智慧媒體,可以通過搭建基於跨模態(圖像、音頻、文本、語音)算法的多媒體內容分析和理解框架,實現媒體標籤、分類、檢測、摘要、內容描述等功能。  論壇上,李松南重點介紹了智慧媒體的內容生產。
  • 騰訊多媒體實驗室推出AI媒體內容生產平臺「智媒」
    作為騰訊旗下頂尖科技實驗室,也是全球多媒體技術的領先者,智慧媒體是騰訊多媒體實驗室的重點研究領域之一。李松南表示,近期多媒體實驗室推出了AI媒體內容生產平臺——智慧媒體,可以通過搭建基於跨模態(圖像、音頻、文本、語音)算法的多媒體內容分析和理解框架,實現媒體標籤、分類、檢測、摘要、內容描述等功能。論壇上,李松南重點介紹了智慧媒體的內容生產。
  • 騰訊多媒體實驗室劉杉:萬物皆媒的5G時代,多媒體打開新場景
    騰訊傑出科學家、多媒體實驗室負責人 劉杉在多媒體技術革新方面,騰訊在不斷尋求突破。自2018年參與H.266/VVC標準制定以來,騰訊多媒體實驗室約有100項技術被標準採納,數量位居全球領先;為積極推動AV1商業化,騰訊雲於2019年11月率先成為中國第一家支持AV1轉碼的雲服務商;今年10月,騰訊在標準截稿3個月內在國內率先發布了H.266高清/超高清實時播放器。
  • 騰訊多媒體實驗室劉杉:萬物皆媒的5G時代 多媒體打開新場景
    騰訊傑出科學家、多媒體實驗室負責人 劉杉在多媒體技術革新方面,騰訊在不斷尋求突破。自2018年參與H.266/VVC標準制定以來,騰訊多媒體實驗室約有100項技術被標準採納,數量位居全球領先;為積極推動AV1商業化,騰訊雲於2019年11月率先成為中國第一家支持AV1轉碼的雲服務商;今年10月,騰訊在標準截稿3個月內在國內率先發布了H.266高清/超高清實時播放器。
  • 騰訊多媒體實驗室劉杉:萬物皆媒的5G時代多媒體打開新場景
    劉杉表示,世界性的疫情讓很多領域的活動從線下轉為線上,而如何在保持高質量服務的同時降低網絡數據帶寬的壓力,向多媒體技術提出更高要求。騰訊作為一家網際網路科技公司,旗下的很多業務和多媒體技術密切相關,因此視頻編解碼技術是騰訊所必備的重要核心能力。騰訊傑出科學家、多媒體實驗室負責人劉杉在多媒體技術革新方面,騰訊在不斷尋求突破。
  • 騰訊多媒體實驗室商世東:天籟技術讓人工耳蝸語音清晰度和可懂度...
    9月27日,值國際聾人日之際,騰訊多媒體實驗室聯合騰訊公益慈善基金會、深圳市信息無障礙研究會等機構召開發布會,宣布發起「天籟行動」,面向公益開發者、設備廠商、相關機構開放騰訊天籟AI音頻技術,應用於聽障人群無障礙建設等相關社會責任領域。會上,騰訊多媒體實驗室高級總監商世東發表了《AI,讓天籟無界》的主題演講,分享了騰訊天籟AI音頻技術研發的原理及應用。
  • 索尼收購了Audiokinetic及其廣受歡迎的Wwise音效工具
    索尼收購了Audiokinetic及其廣受歡迎的Wwise音效工具,索尼互動娛樂公司正在進行一項收購,以充實其遊戲開發工具包。這家出版商透露,它正在收購聲音工程公司Audiokinetic。作為協議的一部分,索尼將獲得Wwise工具包的控制權,該工具包使開發人員能夠輕鬆地向遊戲世界添加交互式音頻。一旦收購完成,Audiokinetic將作為SIE的全資子公司運營。但索尼並不打算將Wwise軟體撤出市場。Audiokinetic將繼續將其工具授權給第三方開發者。當然,索尼使用Wwise中間件不需要支付這樣的費用。每年有超過500款遊戲使用Wwise。
  • 騰訊多媒體實驗室:探索圖像視頻降噪,還原你眼中的高清「視界」
    會上,來自騰訊多媒體實驗室的李松南總監帶來了題為 《圖像視頻降噪的今天與未來:從經典方法到深度學習》的主題演講,對圖像視頻降噪技術的現狀及發展前景進行了深入淺出的闡釋。作為多媒體技術領域的盛會,LiveVideoStackCon音視頻技術大會聚焦音頻、視頻、圖像、AI等技術的最新探索與應用實踐,覆蓋社交、遊戲、智能設備等行業領域,面向工程師、技術負責人等行業相關人士分享技術創新與最佳實踐。本次大會,聚集了60餘名海內外技術專家和150餘家參會企業圍繞前沿技術發展進行探討。
  • 微贊直播受邀參加騰訊全球數字生態大會城市峰會
    10月29日,以「雲啟數字成都」為主題的騰訊全球數字生態大會城市峰會在天府之城成都正式開幕。本次大會聚焦數字成都、城市共榮、產業共創和生態共建,圍繞產業智慧升級、數字經濟發展、產業創新成果、共建數字生態、創造新發展機遇的主題,重點展示了未來城市WeCity、智慧文旅、智慧教育、智慧金融、SaaS生態計劃等內容。
  • 索尼宣布收購保有著Wwise聲音引擎的Audiokinetic_遊俠網 Ali213.net
    索尼互動娛樂股份有限公司於本日(1月9日)宣布收購加拿大的Audiokinetic。Audiokinetic將成為索尼的完全子公司,不過將保留Audiokinetic獨立的業務,可繼續向其他公司提供Wwise的相關服務。
  • 騰訊李松南:8K、沉浸式和AI是視頻技術的3個關鍵詞
    騰訊多媒體實驗室是騰訊科技實驗室矩陣之一,也是全球多媒體技術領先者,實驗室工作主要包括標準制定、核心能力建設和產品落地三大板塊。同時實驗室現也積極合作騰訊雲推出更多沉浸式通用產品與解決方案。  關於多媒體視頻技術的發展趨勢,李松南表示,相信在5G、大數據 、雲計算的加持下,AI 、沉浸式以及視頻編解碼技術會得到更進一步的發展。騰訊多媒體實驗室會在這些領域持續深耕,努力為騰訊以及外部企業的各種To B、To C產品提供更好的視頻技術服務。
  • 騰訊音樂娛樂集團受邀參加2020年成都數字版權交易博覽會
    【天極網IT新聞頻道】11月27日,2020年成都數字版權交易博覽會(以下簡稱:博覽會)在中國西部國際博覽城拉開帷幕,作為中國在線音樂娛樂服務領航者,騰訊音樂娛樂集團(以下簡稱"騰訊音樂")受邀參展本屆博覽會。
  • 騰訊安全玄武實驗室揭秘JTAG調試新內容
    當地時間3月14日,CanSecWest 全球頂級信息安全峰會在加拿大溫哥華成功舉辦,吸引了微軟、英特爾、騰訊等世界頂尖安全企業參會,並帶來近20個前瞻議題。作為 CanSecWest 全球頂級信息安全峰會的「常客」,騰訊安全再次受邀參會,分享了 「JTAG 調試」和「探索高通基帶」等兩大創新安全議題。來自騰訊玄武實驗室的安全研究員馬卓,被稱為「亂入白帽黑客界的鍊金術師」,目前主要從事嵌入式安全、固件逆向等方向的研究。在2017年的 GeekPwn(極棒)國際安全極客大賽上,他就發表過關於「JTAG 調試」的議題演講。
  • 華為上騰訊遊戲出現卡頓,不得不與騰訊聯手,建立遊戲實驗室
    說起華為,相信給大家第一印象就是快速崛起,在手機領域名利前茅,但在遊戲界與騰訊相比,華為還是顯得稚嫩一些。華為使用自己研發的軟體拒絕與騰訊合作,導致手機上騰訊遊戲出現花屏現象,這使得華為不得不與騰訊合作建立遊戲實驗室,共同對手機遊戲進行優化。
  • 騰訊安全聯合實驗室掌門人領銜騰訊CTF(TCTF)
    七大實驗室掌門人擔任導師培養網絡安全新生力量據悉,騰訊CTF(TCTF)不僅為對安全行業感興趣的年輕人提供展示舞臺;更傾邀請騰訊安全聯合實驗室七大掌門人親自指導參賽選手,為新人提供諮詢與幫助,迅速提升參賽者專業水準。
  • 100Audio產品案例-騰訊影業母親節視頻音樂授權
    100Audio產品案例-騰訊影業母親節視頻音樂授權本項目所涉商用音樂來自100Audio獨家製作人KarmaMusicUA的作品《母親節 鋼琴(3版本)》100Audio版權音樂授權平臺為騰訊影業母親節視頻提供音樂授權。