人工智慧技術助力實時虛擬角色製作提質升級

2021-01-19 電科動態



❉Faceware基於深度學習技術實時創建高品質虛擬角色動畫

❉新華社聯合搜狗推出3D版AI合成主播用於新聞播報

❉CinemaNext向影院發送放映設備DCP測試包

❉LG註冊LED電影屏商標LG LED Cinema

近年來，影視娛樂行業實時虛擬角色應用愈來愈廣泛，虛擬偶像、虛擬主播等不斷推出。為讓角色更加逼近真人，不少虛擬角色在製作過程中不僅對角色原型實施精細的面部和身體動作捕捉，還應用人工智慧技術優化提升虛擬角色質量。就目前商用的非卡通類虛擬角色而言，角色細微表情和唇音同步尚存不足，需加強模型訓練和迭代升級，使虛擬角色更加逼真。

Faceware基於深度學習技術實時創建高品質虛擬角色動畫

近日，專注於無標記點面部捕捉系統的Faceware公司推出了最新面部捕捉和動畫製作軟體Faceware Studio，全面替代其前一代產品Faceware Live Server。


Faceware Studio基於深度卷積神經網絡（DCNN）模型實現高質量虛擬角色面部動畫實時創建，用戶只需一個攝像頭或頭戴式攝像設備即可完成數據採集工作，隨後軟體平臺完成人物面部動畫的實時校準、跟蹤、生成，並將數據流實時送入UE4、Unity、Motion Builder等軟體（未來還將支持Autodesk Maya）。製作人員還可根據需要利用配套的Motion Effects工具對生成的動畫形象進行調整。
Faceware Studio基於TensorFlow和PyTorch深度學習框架，應用了深度卷積神經網絡模型，並使用Faceware團隊創建的訓練數據集和現有機器學習庫實施訓練，通過對人物下頜的精準跟蹤、預測和定位，結合人物口腔內部牙齒咬合規律，大幅提升唇音同步（Lip-Sync）的精確性，即使在人物面部存在遮擋唇部和下巴的情況下，軟體仍然能夠根據大量前期訓練模型生成合理的下半部面容，為後續唇音同步計算過程提供依據，從而製作出逼真的人物面部數字形象。

近日，新華社聯合搜狗公司推出了3D版人工智慧（AI）合成主播「新小微」，用於在全國兩會期間量化生產新聞播報視頻。


「新小微」以新華社記者趙琬微為原型，採用人工智慧技術還原真人髮膚，在立體感、靈活度、可塑性、交互能力和應用空間等方面較前一代AI合成主播（2D形象）有了大幅躍升，並實現了從單一景深機位到多機位多景深、微笑播報到多樣化精微表情播報等進步，播報形態可通過不同角度全方位呈現，立體感和層次感明顯增強。


為研發「新小微」，團隊採集了海量數據，使用幾百個攝像頭對角色原型進行360度全方位標記點掃描，並捕捉記錄了多種形態的表情和動作；採集完成後，由原力科技公司通過算法實時驅動、渲染構建3D數字人物模型。


不同於目前大多數靠真人驅動的3D數字人物，「新小微」採用AI驅動，輸入文本後，AI算法便可實時驅動數字人物，生成的語音、表情、唇動更接近於真人，並可實現功能持續自我更迭。

CinemaNext向影院發送放映設備DCP測試包

近日，法國電影技術公司CinemaNext製作了4個測試DCP（1個加密、3個未加密），並提供給全球範圍內的影院客戶，用以在影院復工前測試圖像放映與聲音播放設備。

在法國地區，CinemaNext與法國影像聲音技術高等委員會（Superior Commission for Image and Sound, CST）以及法國影院聯合會（Federation of French Cinemas, FNCF）達成合作，聯合為各類影院發送DCP測試包，以便影院確認其放映設備的運行狀態，製作並發送KDM超過7000個。

為了更便捷地發送DCP測試包，CinemaNext基於Éclair數字內容發行網絡，利用ÉclairBoxes設備及ÉclairExpress SaaS服務為籤約影院提供DCP。若未加入該公司發行網絡，影院也可自行從ÉclairPlay平臺免費下載該DCP。為了適應當前最新技術標準，測試圖像由CinemaNext工程師團隊開發設計，覆蓋遮幅（Flat）和寬銀幕（Scope）、2K/4K、5.1聲道和7.1聲道格式。LG註冊LED電影屏商標LG LED Cinema

近日有韓媒報導稱，韓國LG集團已於今年3月註冊LED電影顯示屏的品牌商標LG LED Cinema，原計劃要在4月份的CinemaCon展會上首次亮相，但由於全球新冠疫情影響，展會被迫取消，因此LG LED Cinema至今仍未正式推出，但註冊商標這一舉動意味著LG將正式進入影院LED顯示屏系統市場，與已經商用的三星Onyx形成正面競爭。


除三星、LG外，索尼也在開發應用於影院的LED顯示屏，目前已完成原型機製造；國內廠商利亞德、洲明科技及奧拓電子也加快步伐布局拓展LED電影屏市場。


相關焦點

  • 淘寶直播在衝刺最複雜的人工智慧技術!
    而虛擬人物則是一個包含了聲音、語言、文字、圖片、動畫、商品等眾多要素的多媒體產品，要實時了解變化的環境，要實時識別，並且理解互動的內容，還要實時在服務的具體場景裡做出反應，這種複雜程度，絕不是一般單個領域的AI技術，而是淘寶集中了全球最頂尖的科學家和多年的技術積累，才有了今天的突破，至少領先業內三年以上。
  • VR超寫實數字虛擬角色技術(節選)
    儘管超寫實3D角色創作的核心在於角色，但是角色本身不能孤立存在，需要一套完美配合的環境場景和展現手段。超寫實影視作品中,虛擬角色還需要細緻準確的動畫能力。在圍繞角色建模和渲染技術的同時，超寫實3D角色技術還包括必要的場景建模和渲染技術、3D顯示技術以及和虛擬創作物的交互技術。
  • 虛擬人像、實時互動…未來銀行也太「會」了!
    新基建風來，各行各業抓準契機，與人工智慧、工業網際網路、物聯網、5G等新技術緊密結合，推動產業的轉型升級向縱深發展。其中，網際網路與人工智慧技術是幫助傳統金融向場景化、個性化、智能化方向發展的關鍵技術，深刻影響著金融行業的當下與未來。
  • 成功案例|仙知機器人雷射SLAM導航技術,助力叉車客戶智能升級
    叉車作為物料搬運的重要工具，在企業的物流系統中扮演著重要的角色，廣泛應用於港口、車站、機場、貨場、工廠車間、倉庫、流通中心和配送中心等，並可進入船艙、車廂和貨櫃內進行成件貨物的裝卸搬運工作。隨著智能物流與智能倉儲的快速發展，自動叉車逐漸成為市場主流產品。
  • 喬治白:打造工業4.0智能工廠 助力企業轉型升級
    來源：時刻頭條12月9日，為了進一步加快傳統製造業重塑，推進工業產業基礎高級化、產業鏈現代化，助力「兩個健康」先行區和國家自主創新示範區建設，溫州市舉行了智能化技改現場交流會。智能化驅動企業轉型升級資料顯示，喬治白專注服裝定製領域，相繼建設了溫州、河南兩大工業園區，創立喬治白職業裝品牌、G73、JZZ男裝品牌，目前已形成了品牌、設計研發、生產、營銷、服務完全一體化的經營模式。
  • 颳起變革之風,物聯網技術助力傳統公共能源行業升級
    颳起變革之風,物聯網技術助力傳統公共能源行業升級今年6月15日,在國家電網舉辦的「數字新基建」重點任務發布會暨雲籤約儀式上,國家電網著重發布「數字新基建」十大重點建設任務,包括電網數位化平臺、能源大數據中心、電力物聯網等在內。可以說,物聯網技術在電網的落地,已經被認為是當下能源行業破局困境的關鍵。
  • 從虛擬拍攝到虛擬角色,VR設備如何助力《頭號玩家》虛擬製作
    （映維網 2018年04月20日）史匹柏當然涉足過動捕與虛擬製作，比如說《丁丁冒險記：獨角獸號的秘密》和《圓夢巨人》。從很多方面上講，《頭號玩家》場景的處理方法與以往的製作方式類似。演員穿戴動捕套裝進行表演。協同工作攝影機（Simulcam）設置可以幫助導演拍攝演員在CG場景下的表演，並且支持鏡頭在事後進行「虛擬」補拍。
  • 首個國風虛擬KOL Ling出道 讓世界看見「科技+文化」的中國力量
    預估到新基建、5G等將釋放的紅利和技術升級給短視頻、直播等文娛市場帶來的系統性變化，阿里、騰訊、網易、B站等各大平臺都在紛紛加碼虛擬IP為核心的新文創。如何將技術基礎上誕生的虛擬偶像和中國市場、中國特色相融合，發展成為5G新形勢下的「科技+文化」新風口，成為時代新命題。
  • 科技助力疫情防控,智慧消防、人工智慧技術發揮著什麼作用?
    因此今年不少相關企業已經提出運用人工智慧技術，精準識別檢測區域內的旅客，與周圍環境切割開來。 超算支持疫苗研發 隨著疫情持續，很多民眾也非常關心疫苗等相關藥物的研製進展。在此領域，中國近年來不斷發力的超算中心已經開始全力以赴。據介紹，無論是對病毒進行基因測序，找到病毒來源以及傳播宿主，還是研製病毒疫苗或者特效藥，超算中心都大有用武之地。
  • 虛擬偶像出道,技術「造星」推動下的粉絲經濟
    不過，隨著近年人工智慧技術的迅速發展與普及，虛擬偶像產業真正迎來爆發期，眾多虛擬偶像打破次元壁，進入三次元世界，成為文娛領域中的新現象。 關鍵詞：虛擬偶像 AI 感知技術 語音合成 近幾年，《偶像練習生》、《創造101》等明星選秀節目，將蔡徐坤、楊超越、孟美岐等一眾年輕人推上舞臺。
  • 虛擬數字人發展白皮書發布 魔琺引領三維多模態AI智能助手新高地
    大會發布了《2020年虛擬數字人發展白皮書》(以下簡稱"白皮書")。白皮書重點分析了虛擬數字人關鍵技術和產業應用發展現狀,其中,白皮書以魔琺科技的"全智能虛擬數字人"作為虛擬數字人典型案例進行講解,並展望虛擬數字人的發展趨勢和應用前景。
  • 專注移動端AR+AI動捕技術,「與願科技」想讓C端用戶參與虛擬IP打造
    隨著屏幕技術的發展，虛擬IP的展示方式也在向3D進化。由震驚文化孵化的3D虛擬IP「豬小屁」抖音播放量已超24億，微信表情包使用量超過9億；快手孵化的3D虛擬主播「一禪小和尚」粉絲量級已達五千萬，位列素人帳號第一。與此同時，虛擬IP經濟的發展也在倒逼製作技術升級。傳統的3D虛擬IP製作以CG視頻為主，依賴人工且耗時長。
  • 虛擬偶像出道,技術「造星」推動下的粉絲經濟|偶像|初音未來|...
    內容提要：虛擬偶像產業起步並不晚，第一個虛擬偶像早在二十世紀八九十年代就已誕生。不過，隨著近年人工智慧技術的迅速發展與普及，虛擬偶像產業真正迎來爆發期，眾多虛擬偶像打破次元壁，進入三次元世界，成為文娛領域中的新現象。
  • 汽車之家聯席總裁邵海峰:助力2020北京車展智能升級 汽車之家開創...
    9月26日，第十六屆北京國際車展正式開幕，本屆車展以「智領未來」為主題，將集中展示中外汽車行業的前沿技術，讓人頗為期待。此次北京車展上，汽車之家聯席總裁邵海峰接受了來自環球網的媒體訪談。據悉，為助力2020北京國際車展智能升級，汽車之家特別推出2020北京網上車展——從「逛、看、聽、買」四重維度進行全新規劃，致力於為用戶提供「私人訂製」的網上逛展新體驗。
  • 基於IoT+AI技術融合的智能貨櫃核心系統方案 助力企業快速轉型升級
    ，解決智能貨櫃部署中的設備聯網、身份圖像識別、算法、智能控制、設備運維管理、支付等難題，助力客戶更便捷布局智能貨櫃市場並快速轉型升級。可接入智能貨櫃內控制貨柜上門鎖、攝像頭、燈光、溫度等所有傳感器和硬體設備，實時上傳心跳數據和圖片打包上傳至雲端，解析雲端發過來的指令實現智能控制貨櫃硬體。
  • 刷手開門進電梯,人工智慧技術在社區落地!
    深蘭科技打造的手脈等人工智慧技術，日前正式在融創·外灘壹號院落地。人工智慧技術可以在小區裡打造哪些應用場景？又如何給居民們帶來智能、便利、安全的精緻生活呢？一起來看~手脈系統讓社區更智能近日，深蘭科技打造的手脈等人工智慧技術在融創·外灘壹號院小區正式落地。
  • 「小嶽嶽虛擬人」播報天氣視頻1小時生成3240條!百度大腦人像特效...
    開放日上，百度大腦宣布全新開放互動娛樂、虛擬試妝、虛擬人、美業/健康四大人像特效應用場景下，七大類特效能力，並在現場演示產品使用效果。零技術低門檻、小時級批量製作高保真素材、半分鐘便可生成虛擬主播並適用於眾多場景等等技術優勢，全方位展現了百度大腦在人像特效領域的領先AI技術能力與應用前景。
  • 沃爾瑪準備開發自有人工智慧網絡;Levis推出在線「虛擬造型師...
    雷鋒網消息 Levis推出了一個在線「虛擬造型師」來幫助消費者挑選適合自己風格的衣服。它是一個智能聊天機器人，目前已在Levis官網和Facebook Messenger上線。它結合了實體店員工的時尚知識以及人工智慧，可以為用戶提供個性化的服務。比如，機器人可以向用戶提問「你希望你的牛仔褲在臀部和大腿處貼身嗎？」
  • 沃爾瑪準備開發自有人工智慧網絡;Levis推出在線虛擬造型師,幫助...
    Levis推出在線「虛擬造型師」，幫助消費者穿衣搭配日前，蘑菇街成立了一個搭配研究所，希望把主觀的審美與數據算法結合起來，更高效地滿足用戶隨時隨地搭配穿衣的需求。如今，美國牛仔服品牌Levis（李維斯）也加入了這一行列。雷鋒網消息 Levis推出了一個在線「虛擬造型師」來幫助消費者挑選適合自己風格的衣服。
  • PinoAI平臺—京東人工智慧技術的對外輸出
    但作為一家以技術為驅動的企業，京東在技術方面的投入及成果也是非常巨大的。通過發展雲計算、大數據、智慧物流、人工智慧、AR/VR、智能硬體等最新技術，京東也正實現迅速增長，並為自身業務帶來顯著提升。最廣為大家所知的，應屬京東的「無人系列」了，包括無人機、無人車及、無人倉等等。這也是外界眼中，京東人工智慧技術的主要體現。但實際上，京東人工智慧技術的應用遠不止於此。