紅遍全球的搜狗3D AI合成主播,到底有多牛?

2020-12-22 創新創業中關村

有這樣一位超級主播

她可以不吃不喝

每天連續工作24小時

而且沒有抱怨和壓力

她舉止優雅談吐得當

給一個文本馬上出口成章

她自由穿梭在虛擬直播間

一秒鐘就能換裝

不懼360度無死角展現

更不會衰老和死亡

她叫「新小微」,是中關村企業搜狗和新華社聯合推出的全球首個3D AI合成主播,在2020年剛一「出道」便火遍全球。

3D AI 合成主播的進化史

「新小微」基於搜狗超寫實3D數字人建模、多模態合成技術、肌肉系統實時驅動等多項人工智慧技術,使機器可以基於輸入文本生成逼真度極高的3D數字人視頻內容。

在「新小微」的AI合成方面,搜狗採用了行業領先的真人掃描、面部肌肉驅動、表情肢體捕捉等技術,能夠生成高逼真度的3D數字人模型。然後,通過搜狗的多模態合成技術對3D超寫實數字人進行實時驅動及渲染,使「新小微」面部表情、唇動、肢體動作和語音完全同步。

從外型上看,「新小微」不僅能走動和轉身,擺出各種複雜動作和姿態,而且在特寫鏡頭下,甚至連頭髮絲和皮膚上的毛孔都清晰可見,高度還原了真人髮膚。

總體而言,在立體感、靈活度、可塑性、交互能力和應用空間等方面,較前幾代主播都有了大幅躍升

此前,在2018年網際網路大會期間,搜狗與新華社聯合發布的全球首個AI合成2D主播「新小浩」初次亮相,一經面世就引發了公眾極為熱烈的討論。

2019年初,搜狗又和新華社新媒體中心再次合作,聯合推出全球首個AI合成女主播——「新小萌」,向世界報導中國「兩會」的盛況。

雖然,「新小浩」、「新小萌」的寫實度比「新小薇」略高一些,但是3D AI合成主播「新小薇」更加立體生動,靈活性更高。從2D到3D,雖然在核心的多模態識別及生成等方面是一脈相承的,但又不完全是技術升級和迭代版本,二者是處於「搜狗分身」體系下的並行發展路線。 如今,3D AI合成主播成為了搜狗AI合成主播品牌下一條新的技術線,所有這些主播的背後都是搜狗公司結合多項前沿科技研發出的「分身」技術。

「分身」技術與搜狗的AI版圖

近年來,搜狗積極研發語言相關的AI技術,並且憑藉領先的技術實力在國際人工智慧技術大賽上屢屢獲獎。基於這些技術,搜狗「分身」才能夠基於少量真實音視頻數據,快速遷移生成虛擬分身模型,從而實現了全球人工智慧合成領域的技術創新和突破,開創了人工智慧音視頻實時合成的先河。

「新小薇」合成前的數據採集

在遊戲以及電影行業,一般都是靠動畫師逐幀手繪動畫的方式完成3D人物的表情以及肢體驅動。比如在一個 10 人構成的動畫中,往往要對這 10 個演員進行掃描、動作捕捉、面部捕捉,美術師一幀一幀勾畫出來,然後進行真人與卡通人物綁定,還需要對他們的聲音進行採集等等,耗費巨大的時間成本。而搜狗最新推出的3D AI合成主播,完全靠 AI 算法實時驅動,輸入一段文本就能實時輸出一段視頻,極大提高了生產力。

從大眾最熟悉的搜狗輸入法、搜狗搜索,到最新搜狗AI錄音筆、AI合成主播等等,成立於2003年的搜狗,一直是AI領域的創新者。無論推出新產品還是延展服務,搜狗在語音識別、語音合成、圖像識別與合成、視頻合成以及問答、翻譯等方面都取得了突破性進展,並率先將人工智慧帶入規模化應用。

2019年,搜狗公司CEO王小川榮膺「第十五屆中國青年科技獎」。評審委員會認為,搜狗輸入法作為網際網路時代的「國民輸入法」,被公認為是繼王選院士雷射照排系統之後中文信息化的又一裡程碑式發明。與此同時,隨著人工智慧的蓬勃發展與應用,王小川為搜狗公司明確了以語言為核心、通過「自然交互+知識計算」布局人工智慧的發展路徑,帶領搜狗不斷穩步前進。

未來,搜狗將在知識計算與自然交互的引領下,以「讓表達和獲取信息更簡單」為使命,始終專注於人工智慧,以創新的技術型產品為用戶不斷創造價值。

「AI分身」將影響每個人未來的工作方式

王小川曾表示,在人工智慧領域,搜狗一直有兩個核心理念,個是讓機器人成為你的分身,一個是讓機器人成為你的助理。

目前,搜狗分身技術實現了在不同場景下更為自然的人機互動,在媒體融合、金融、醫療健康、教育、法律、娛樂、天氣等多領域提供個性化的內容。

2019年6月,搜狗與北京網際網路法院聯合舉行新聞發布會,對外發布全球首個「AI虛擬法官」,旨在通過北京網際網路法院的在線智慧訴訟服務中心為民眾提供更為便捷、高效的線上訴訟服務。這也是搜狗分身技術藉由AI合成主播在媒體領域全面應用之後,在司法領域的首次落地。

同年8月,搜狗聯合平安普惠,推出AI合成互動客服。此AI客服已在平安普惠APP上線,為廣大用戶提供智能借款諮詢服務。這也是搜狗分身技術首次涉足金融領域,聯合金融頭部企業共同推動金融行業服務升級。

搜狗AI交互技術部總經理陳偉曾表示:「搜狗分身技術一直在持續迭代中,目前搜狗具備了在整個分身技術方面快速落地的穩定能力。搜狗的分身技術不僅僅停留在實驗室的模型階段,而是已經跟很多不同領域的場景、產品進行了深度結合。AI合成主播原形的工作性質發生了很多變化,AI分身落地之後確實改變、影響每個人未來的工作方式和狀態。」同時,陳偉認為,從主播場景到交互場景,3D未來的空間會更大,它的靈活性非常強,可以適配更多的場景。

在2020年全民營養周啟動儀式上,搜狗再次推出一款讓人眼前一亮的產品應用——全球首款「AI營養師」。這款產品由中國營養學會權威指導,聯手國內多位知名營養學專家共同合作產出。已覆蓋了18種細分人群的人群庫、超過1800種食材營養素的食材庫、超過2000種疾病飲食建議的疾病庫,構建了目前國內飲食營養領域領先的營養健康知識圖譜。

通過這一系列在不同領域的成功嘗試,搜狗分身已經具備了較為成熟的技術手段,未來除了金融、傳媒、法律、文娛等方面,搜狗分身技術還將開拓新的領域及場景,通過提供個性化的解決方案,為不同行業賦能,用科技加速智能化生活的到來,推動社會智能化轉型。

相關焦點

  • 搜狗AI合成主播走出國門,向世界證明中國AI
    搜狗官方也表示,此次搜狗AI合成主播出海,一方面,正是響應國家「一帶一路」政策號召的針對性發展戰略;另一方面,對全球媒體行業而言,隨著搜狗AI合成主播背後的「搜狗分身」技術的升級迭代,把AI的觸角延伸到多個語種的信息領域,將進一步促進AI合成主播在全球範圍的應用普及。此次同阿布達比媒體集團的合作,助力搜狗以AI技術的創新應用成功撕開了國際市場,提升了海外知名度。
  • 搜狗發布全球首個AI合成主播,上崗新華社,分分鐘合成視頻新聞
    在上周閉幕的2018烏鎮世界網際網路大會上,搜狗公司和新華社共同帶來一場別開生面的跨界發布會——全球第一個AI合成主播就此亮相。
  • 全球首位3D版AI合成主播亮相
    她是全球首位人工智慧驅動的3D版AI合成主播。昨日,新華社新媒體中心主任陳凱星現場播放了一段未來感十足的視頻播報,介紹了他的「新同事」——「新小微」。 3D版AI合成主播。
  • 搜狗3D AI合成主播背後:遊戲裡的CG效果,只需一段文本就能生成
    出品 | 搜狐科技作者 | 馬文玥兩會召開之際,搜狗聯合新華社推出的全球首個3D AI合成主播「新小微」正式亮相上崗,為觀眾播報最新兩會新聞資訊。自2018年搜狗自身的「分身技術」推出全球首個AI合成主播後,這也是搜狗首次將2D虛擬人升級為3D形象。
  • 全球首位!「3D版AI合成主播」在中國上崗,太驚豔了~
    3D版AI合成主播「大家好,我叫新小微,是由新華社聯合搜狗公司推出的全球首位3D版AI合成主播,我將為大家帶來全新的新聞資訊體驗。」一段「未來感」十足的視頻播報畫面讓人眼前一亮,全球首位3D版AI合成主播在全國兩會開幕前夕正式亮相,這是繼全球首位AI合成主播、站立式AI合成主播、AI合成女主播、俄語AI合成主播之後,新華社智能化編輯部聯合搜狗公司最新研發的智能化產品。
  • 全球首個AI合成主播亮相!現場真人主播直呼「虐心」
    11月7日,在第五屆世界網際網路大會上,有這樣一場發布會,讓發布會的主持人倍感壓力和「虐心」。當天,搜狗公司CEO王小川、新華社副社長劉思揚等嘉賓和著名主持人邱浩聯合帶來了一場跨界產品發布會:搜狗與新華社合作開發、全球第一個全仿真智能虛擬主持人——「AI合成主播」正式亮相。
  • 「克隆」新華社女記者,全球首個3D AI合成主播是如何煉成的?
    它由搜狗公司聯合新華社推出,是全球首位 3D AI 合成主播,編號「新小微」。「逼真」大概是我們對於表現力極高的一種讚揚,比如在《霸王別姬》中,「袁四爺」看到程蝶衣出神入化的演技後,發出「虞姬再生」的感嘆。搜狗 3D AI 主播又何以做到逼真?
  • 王力宏點讚AI合成女主播,搜狗讓《A.I.愛》已在眼前
    近日,由搜狗與新華社聯手發布的全球首個AI合成女主播,一經上線便圈粉無數,不僅引發了全球媒體業和科技圈的熱烈討論,就連著名歌手王力宏也擔當了一回「自來水」。3月4日,王力宏轉發了AI合成女主播報導新聞的視頻,並評論道:沒想到《AI愛》這麼快就來到了日常生活。
  • AI合成主播
    2020年5月搜狗聯合新華社推出的全球首個3D AI合成主播「新小微」正式亮相,為全國觀眾帶來最新的兩會新聞資訊報導。它以新華社記者趙琬微為原型,通過超寫實 3D 數字人建模、多模態識別及生成、實時面部動作生成及驅動、深度學習等技術煉就而成。
  • 搜狗AI合成主播亮相央視最美大學生、最美高校輔導員盛典,分身技術...
    此次盛典,搜狗AI合成主播「雅妮」擔當客串主持人,不僅一亮相就以青春靚麗的主持形象吸引了全場目光,更以自然逼真、生動有趣的主持風格全方位展現了業內領先的「搜狗分身」技術,讓人深刻感受到了人工智慧帶來的「新潮」與「改變」。
  • 剛剛,全球首個AI合成女主播在新華社上崗!
    剛剛,一個大消息傳來,有一個行業發生大變化!全球首個AI合成女主播上崗了!誰也想不到,這一天會來得這麼快!近日,新華社聯合搜狗在京發布全新升級的站立式AI合成主播,並推出了AI合成女主播,再次引發了全球媒體圈一片譁然。一石激起千層浪!
  • 擁抱AI合成主播,信心何在?
    其中「麗莎」是由新華社、俄羅斯塔斯社和中國搜狗公司共同研發的全球首個俄語AI合成主播。從視頻片段可見,這位虛擬新聞主播在外型、口形、聲音和姿態方面都足夠達到以假亂真的程度。 視頻 / 全球首個俄語AI合成主播 國內層面,早些時候的6月5日,紫金山新聞客戶端AI虛擬主播上線儀式在南京市新聞發布廳舉行,江蘇省首個AI虛擬主播上崗。這位被戲稱為「學霸員工」的AI主播,既能夠在播報新聞時實現中、英、日、韓、俄、法、西、意、葡、德、泰、越南等14種語言的無縫切換,同時還能支持文本到視頻的自動輸出。
  • 搜狗人工智慧合成主播亮相2020第二屆北京國際公益廣告大會
    開幕式上,搜狗人工智慧合成主播雅妮進行主持播報:「尊敬的各位領導、各位來賓,大家好!我是來自搜狗公司,由多模態合成技術打造的本屆大會人工智慧合成主持人雅妮,很高興在本屆大會與各位相遇,距離2020北京國際公益廣告大會開幕還有一分鐘,請各位領導及嘉賓抓緊時間就坐並將手機調至靜音或關閉狀態,謝謝合作!」
  • 搜狗分身技術全新升級「第七代」,攜手新華社客戶端首推AI主播超市
    近日,搜狗分身技術全新升級至「第七代」,並攜手新華社在其新聞客戶端中推出「AI主播超市」,送出八位AI主播「新年大禮包」,用戶可以根據自己的喜好選擇AI主播,享受實時全球資訊播報。搜狗分身技術升級「第七代」,AI主播更逼真兩年多前,全球首個AI合成主播「新小浩」便是搜狗與新華社聯合發布,此次推出的「AI主播超市」,新小浩、新小萌、新小微、夢瑤、雅妮等八位明星AI主播集體亮相,不僅聲音音色、講話風格、表情唇動、肢體動作都更加精細和準確,表達效果也更加豐富、生動、人性化,而這一切,均得益於業內領先的搜狗分身技術。
  • AI合成「主播」已正式上崗,人工智慧撲面而來,你怕被取代嗎?
    AI合成主播「動」起來了,而且還有了新搭檔。2月19日,新華社聯合搜狗公司在京發布全新升級的站立式AI合成主播並推出全球首個AI合成女主播。↑2月19日,新華社聯合搜狗公司在京發布全新升級的站立式AI合成主播並推出全球首個AI合成女主播。圖為新華社副社長劉思揚、搜狗公司CEO王小川共同啟動AI合成主播升級。
  • 搜狗人工智慧合成主播亮相中國廣電媒體融合發展大會
    大會以「共融·共生·共美好」為主題,搜狗人工智慧合成主播雅妮於開幕前亮相主持開場,國家廣播電視總局副局長、黨組成員朱詠雷,中共北京市委常委、宣傳部部長杜飛進出席大會啟動儀式。本次大會為期2天,致力於搭建一個跨平臺、跨層級、跨區域、跨行業的交流合作平臺,總結媒體融合發展經驗,推動媒體融合向縱深發展。
  • 孫悟空的72變,被搜狗學去了
    究竟發生了什麼先讓小wifi放一段視頻給你們感受一下▽ 簡單來說,視頻中的「男主持人」是搜狗與新華社合作開發、全球第一個「AI合成主播」。 剛才小wifi介紹的AI合成主播,你們有沒有發現TA特別像一位主持人。 對!其實TA就是新華社主持人邱浩的AI分身。 無論是身形相貌還是語音語調,邱浩的AI分身都與他一般無二。
  • AI虛擬主播簡史
    2018年,搜狗和新華社聯合推出的全球首個AI合成主播的誕生,掀開了「AI+虛擬主播」的神秘面紗,一時間,嗅到「科技紅利」的市場各方開始蜂擁而上。2018年11月,全球首個「AI合成主播」誕生;2019年3月全球首個「AI合成女主播」誕生;2019年春晚AI虛擬主持人團隊誕生……在這套AI虛擬主播的方案中,只需輸入一段既有的新聞文本,主播就可實時進行播報,且發音與唇形、面部表情等也完全吻合,無論是看上去還是聽上去,似乎都與真人無二了。 當然,這是明面上的效果,確實值得肯定。但這套方案的背後,仍沒有完全AI化。
  • 卷福到底有多牛?曾因太醜被拒演,但僅用20分鐘就紅遍全球
    卷福到底有多牛?曾因太醜被拒演,但僅用20分鐘就紅遍全球!「卷福」如今是紅遍歐美的一線明星。他憑著超凡的演技、紳士般的風度、淡定從容的氣質及其所飾演的一系列劍走偏鋒的角色贏得了觀眾的喜愛,同時讓人們記住了他那十分拗口的名字——本尼迪克特·康伯巴奇。
  • 全球首個「AI主播」在中國上崗!人工智慧會取代、統治人類嗎?
    全球首個「AI主播」在中國上崗近日,新華社發布全球首個合成新聞主播——「AI合成主播」,引起全球的廣泛關注