不僅是AI換臉 人工智慧已滲透進整個文娛行業

2021-01-07 TechWeb

這還是蘇大強?

有網友將最近播出的電視劇《都挺好》中讓人恨得牙痒痒的蘇大強,用AI換臉變成了眉清目秀的吳彥祖,場景竟毫無違和感。

被AI調戲不止蘇大強,楊冪、朱茵、徐錦江、洪世賢、梁非凡,B站名場面全被AI換臉調戲了一遍。在AI時代,眼見不一定為實。

其實,也不僅僅是AI換臉,AI已經滲透進整個文娛行業。

在這篇文章中,我們以視頻製作為例,盤點文娛產業中用到的AI技術。看完之後,可能你會產生「這個世界是不真實的」錯覺。

AI的文娛之旅,馬上就要發車了。

Step 1:定劇本

前期策劃是個技術活,視頻質量最終如何,拍攝劇本、創意方案、解說詞等關鍵內容就在一開始決定了一半成敗。

要不考慮下用AI進行文字創作?

寫稿機器人DreamWriter就是一位AI記者,2015年,其處女作《8月CPI漲2% 創12個月新高》一經發出就引發轟動,這個機器人能根據算法在第一時間自動生成稿件,一分鐘出成稿……這手速人類記者還是望塵莫及。

騰訊的DreamWriter開了先河後,國內媒體也陸續試水,新華社的寫稿機器人、阿里巴巴的「DT稿王」、今日頭條的「xiaomingbot」都來了。

目前寫稿機器人主要集中在財經股票、體育賽事等對失效要求高且不需要額外添加素材的領域。從速度與準確性來說,人類記者的優勢開始down down down了。

AI為文字工作者省了不少工夫,不僅僅寫出新聞報導,創造性的工作也不在話下。

微軟小冰就是這樣一個寫稿機器人,任何人可以在官網上給她投餵任意照片+幾個關鍵詞,不出幾秒,少女詩人小冰就會為你作出一首詞句優美的詩來。

微軟表示,小冰所有的詩歌都沒有版權,任何人可以在此基礎上隨意改動變成自己的創作。雖說內涵可能不及人類詩人,但人類創作可以在其中獲取靈感。

除了短篇幅的小詩,AI寫的長篇小說讀者反應還不錯。

美國Botnik工作室的AI就續寫了《哈利·波特》的新故事。研究人員先將整個系列7部小說輸入至系統,用自然語言處理技術模仿原作,生成了新篇章:

《哈利·波特與看起來像一大坨灰燼的肖像》(Harry Potter and the Portrait of What Looked Like a Large Pile of Ash)。

網友表示,新篇章中有情節、有人物、有對話,而且還夠神經病……如果出版一定能大賣。

有這樣的AI文學家,還不怕創造不出來腦洞大開的好玩劇本?

Step 2:拍視頻

有了劇本,那就可以開始拍攝了。

拍攝的場景、分鏡頭腳本、任務的站位……拍攝過程中需要考慮的事情頗多。

不過,AI帶來了一種簡便做法,比如用AI來合成虛擬主播。

這位AI主播不僅能「坐在」演播室,替代人類播報新聞。還能「手舞足蹈」,運用起肢體語言豐富表達了。男主播「新小浩」以新華社主播邱浩倍為原型創建,而「新小萌」以屈萌為原型。

虛擬主播通過對真人主播聲音、唇形、表情動作等特徵進行提取,通過語音合成、唇形合成、表情合成以及深度學習等技術,能具備和真人主播一樣的播報能力。

還在擔心拍攝過程困難麼,未來自動合成技術將越來越完美。

除了合成真人主播,動畫合成也可以考慮一下,迪士尼早已試水了。

此前為了改善影視動畫中人物口型與臺詞不一致的的情況,迪士尼提出一種自動生成語音動畫的深度學習方法,根據輸入的臺詞,自動匹配嘴型。

現在,迪士尼的最新研究在此基礎上更進一步,其論文顯示,與美國羅格斯大學研發的端對端系統已經實現AI看電影劇本後,創建粗略的劇情更改圖和視頻描述文本。

可以說,AI重新定義了「拍攝」這項體力活。

Step 3:後期合成

俗話說得好,三分靠拍攝,七分靠後期,所有大片都離不開強大的後期製作。

後期是個耗時間燒顯卡的活,非線性剪輯、畫面渲染調色、特效合成等哪一樣都是創造+體力活。

AI加持下,並非所有的工作都需要人類完成。就比如說,剪輯這項體力活AI已經能幫上大忙了。

剪輯師經常遇到一個問題:把視頻剪成不同的長寬比,比如把橫向的視頻剪成縱向,通常很災難。

Adobe的Project Smooth Operator的功能,可以利用Adobe Sensei人工智慧和機器學習框架,自動追蹤視頻裡主角的位置智能裁剪。

如果主角不止一位呢?當然是根據各自的動作,自動鎖定每一幀的重點:

是不是很贊?

除了自動剪輯,AI已經可以做到在理解內容及場景的基礎上,富有邏輯的生產新的視頻內容。

在2019兩會期間,光明網與中國政協傳媒網聯合推出的「委員全息履職」節目就藉助影譜科技的智能影像生產技術,可視化、智能化地呈現政協委員履職作業,不僅讓政協委員履職內容更加直觀易懂,相比普通視頻承載的內容也更加豐富有趣。

可以看出,AI可以根據視頻內的語義場景,嘗試匹配邏輯吻合的影像素材,從而讓視頻內的信息更加豐富直觀。

並且,隨著表情、語義、手勢等變化,視頻畫面也隨之同步演繹。

這樣的智慧媒體技術方案,為媒體平臺提供了一個新的內容生產和實現方式,媒體可依靠大數據平臺基礎,藉助可視化模型技術,以數據地圖、時間線、氣泡圖、交互性圖表、人物關係圖等方式呈現多維數據信息,實現新聞可視化加工生產。

在國內融媒體加速建設的當下以及5G即將普及的未來,視頻越來越將成為媒體內容的主要載體,這樣的智慧媒體解決方案將會起到更大的作用。

此外,還可以進行虛擬演播室、虛擬主播等創新報導模式的探索,通過VR、AR、人臉特徵提取、人臉重構、情感遷移等多項前沿技術,對視頻內容的呈現形式和交互模式進行創新。

顯然,此類技術的應用正在幫助媒體和視頻平臺更好地管理其內容庫及信息生產加工方式,優化成本結構,進一步提高視頻內容開發及生產效率。

也有一些非常規的操作,比如前一陣子嗶哩嗶哩上爆火的AI換臉模型deepfakes。

無需會寫代碼,只需要手握一個fakeapp等軟體應用,「投餵」想要換成的主角的視頻進行訓練,就能自己訓練一個AI模型出來。

隨後,把《射鵰英雄傳》裡的朱茵換成楊冪,簡直看不出是人造的:

把直播中的馮提莫換成趙麗穎,播放量也近百萬:

不過,現在換臉也有一定的法律風險了。上周六全國人大常委會審議的《民法典人格權編(草案)》裡,正式加了一條:

任何組織和個人不得以利用信息技術手段偽造的方式侵害他人的肖像權。

AI換臉一時爽,一直換臉可能就得體驗一把違法的酸爽了。

Step 4:添加音效

連畫面內容都能搞定,音軌上選擇的那條BGM也肯定少不了AI。

現在,作曲、作詞甚至演唱,都全部可以由AI完成。說不定哪一天,虛擬偶像就在偶像界攻城略地。

比如,不少宅男群體心水的AI虛擬歌姬洛天依:

這個採用語音合成技術的虛擬角色,聲音根據中國配音演員山新和日本歌手鹿乃的音色合成,人物被設定成了一名15歲的少女,產出過不少魔性的歌曲,比如《小雞嗶嗶》《達拉蹦躂》《花落兮》等。

除了當偶像,AI技術還能協助人類歌手作詞作曲。

世界首張AI作曲專輯《I AM AI》是美國網紅歌手Taryn Southern上傳的作品,通過AI音樂創作公司Amper Music的軟體,Southern只需調整情緒、風格、速度等參數,AI即可生成一首曲子,還會選擇最合適的和弦和器演奏出來。

雖還不能與格萊美獲獎曲目相媲美,但和國外音樂平臺Spotify上的熱門歌曲相差不大,還多了幾分金屬感和未來感。

放眼國內,也有不少青年才子將AI與音樂結合起來。

去年的《中國好聲音》中,清華學霸宿涵用一曲《止戰之殤》一戰成名,這首歌中的主歌歌詞,就是AI生成的。

宿涵表示,利用深度學習算法,AI已經掌握了華語樂壇近幾千首作品,根據輸入歌詞的風格無線創作歌詞。輸入「深淵、噩夢、絕望、戰爭」,AI就能輸出「諷刺掛滿美麗的太陽」。作詞作曲,何不讓AI助你一臂之力。

從內容撰寫、視頻「拍攝」、後期特效到音效添加,AI參與了整個視頻創作的所有流程,現在看這個世界是不是覺得不太真實了?

而這只是AI在文娛大產業中應用的一小部分。

手遊王者榮耀裡王者段位的AI對手,網易雲音樂裡的個性化推薦、阿里「魯班」系統一秒生成8000張海報……AI+文娛的結合已經遍布了你沒有發覺到的區域,科技感已經遍布到生活的方方面面。

未來,已來。

— 完 —

相關焦點

  • AI換臉、虛擬主播、智能影像生產……文娛產業現在已成AI的天下了
    有網友將最近播出的電視劇《都挺好》中讓人恨得牙痒痒的蘇大強,用AI換臉變成了眉清目秀的吳彥祖,場景竟毫無違和感。被AI調戲不止蘇大強,楊冪、朱茵、徐錦江、洪世賢、梁非凡,B站名場面全被AI換臉調戲了一遍。在AI時代,眼見不一定為實。其實,也不僅僅是AI換臉,AI已經滲透進整個文娛行業。
  • 「三十而立」專欄丨人工智慧換臉直播:2.9次元的「實時虛擬數字人」
    現在,這場夢早已不是幻想,把夢變為現實,是朱峰正在做的事,人工智慧換臉直播項目就是他在這條路上邁出的第一步。從北京大學畢業,在文娛出品投資行業沉浮9年後,朱峰選擇回到校園,邊讀研邊創業。出於對科技和藝術的興趣,他投入到以AI+CG技術為核心的人工智慧換臉項目的研發中。
  • 5G支持下,人工智慧除了AI換臉,還能幹什麼?
    近年來,一種AI換臉技術在網絡人群中掀起火熱潮流,也將人工智慧這項新興科技帶入到普通人的生活中。人們開始討論人工智慧將給人類帶來怎樣的改變。
  • AI換臉:人工智慧的一場裸奔
    「我一直認為『AI換臉』隱藏了不可迴避的法律問題,所以看到Zao出現後,很好奇他們是如何解決的,很遺憾,他們並沒有解決。」將「換臉」推到風口浪尖的是一系列融合了AI技術的「假視頻」。2017年12月,一個名為「深度偽造」(deepfakes)的用戶在美國論壇Reddit上發布了多段色情視頻,不同的是,他讓電腦學習好萊塢女明星的圖像資料,然後把女明星的面部移植到色情片女主角臉上,近乎完美地實現了動態換臉,這引發了大量討論和抨擊,最後以帳號被封告終。
  • 從AI換臉到AI脫衣,AI究竟做錯了什麼?
    換臉軟體 「ZAO」 存在的每一個安全隱患,都與我們息息相關。最重要的一點是,只需一張圖片就能換臉的話,也容易引起詐騙等問題。比如:針對我們留學生群體,在電信詐騙防不勝防的今天,如果「ZAO」的換臉技術被壞人加以利用,偽造視頻傳給遠方的家人,蒙圈兒相信,我們的家人,大多數都會被騙。
  • 人工智慧換臉術讓楊冪火了!(中國人工智慧產業全貌 都在這張AI勢力範圍圖)
    視頻發布者通過人工智慧AI換臉術將原版黃蓉的飾演者朱茵,換成了楊冪!真真假假,讓人根本分不出。這是原版的朱茵截圖:應用人工智慧換臉術後,把朱茵的臉換成楊冪:2017年人工智慧的崛起氣勢如虹,創業者在資本的熱潮中狂歡,對AI可能給各行業帶來的革命性變革奔走相呼,然而在過去的2018年,區塊鏈的浪潮和共享單車的大起大落,卻一度讓人工智慧黯然失色、星光不再。
  • 換臉蔡徐坤的AI技術,會成為色情報復的利器
    原標題:《AI換臉是色情報復的新武器》本文轉載自:X博士(ID:doctorx666),已獲得轉載授權在B站鬼畜區,惡搞蔡徐坤已經成了少男們發洩創造欲和荷爾蒙的快樂擂臺賽。這個事情的來龍去脈,我們在之前的文章中已經詳細說過,不贅述。
  • AI換臉小電影大火!國內女星紛紛躺槍,Baby熱巴「現身」福利區
    近幾年AI人工智慧可謂是發展的異常迅猛,在科技領域,AI人工智慧解決了很多問題,可以說,AI人工智慧絕對是一大進步,隨著這一行業的火爆,AI換臉也隨之而來。這一技能不僅適用於科技圈,在娛樂圈也非常常見。
  • AI換臉後毫無違和感
    所以,人工智慧換臉技術現在已經這麼強了,百分百替換演員?事實上用該類技術進行換臉已經並不是新鮮事兒了,而近期接連不斷的爆紅則是因為這項技術正逐漸在普通人之間得到應用。這位網友在2017年底使用谷歌開源機器學習框架編寫了一個不同換臉人工智慧,他使用了很先進的機器學習思想,同時訓練了兩個人工智慧,一個用來換臉,另外一個用來識別換臉
  • 劉亦菲粉絲自打自臉,ai換臉朱琳被吊打,神顏經不起折騰
    最近,劉亦菲粉絲ai換臉了朱琳,也就是《西遊記》中女兒國國王這一經典角色當然也不排除粉絲自打自臉,非要逼著劉亦菲不適合的造型上ai換臉。《西遊記》中女兒國國王的角色,真的是十分經典了,給人留下的印象也十分深刻。劉亦菲粉絲這次給劉亦菲ai換臉朱琳,應該也是想讓神仙姐姐走進經典之中。但還是很遺憾的翻車了,劉亦菲的神顏也經不起粉絲的這種折騰。
  • 2020年AI圈十大熱議焦點:演員換臉、AI找對象、去馬賽克
    一、限制AI出口:中美新規均限制AI技術出口 人工智慧「出息」了!2020年才一開年,川普政府就頒布新規,要限制人工智慧軟體的出口,而在去年,出口管制還主要是半導體等關鍵領域的軟硬體技術才享有的封鎖「待遇」。
  • 仝卓被AI換臉,人工智慧竟然這麼厲害!如何選AI專業的院校?
    近日,優酷播出新劇《了不起的兒科醫生》,原本劇中仝卓被AI全集換臉,臉變成了另一個演員,讓人感嘆「AI技術真強大」。對於AI應用於影視劇,很多人是支持的,新技術讓影視作品擁有更多可能;還有部分人是不支持的,認為這樣會有更多的替身和更多無良的演員出現。AI技術到底有多厲害?
  • 微軟北大聯合提出換臉 AI 和臉部偽造檢測器,演繹現實版「矛與盾」?
    圖片來源:360圖片人臉技術研究背景目前,最先進的機器學習算法不僅可以完成對地點或物體的圖像改變與生成,以 Deepfake 為代表的 AAI 換臉技術甚至已經可以達到以假亂真的換臉效果;但由於換臉技術的濫用可能會為社會帶來一系列惡劣影響,研究人員也在不斷探索該技術的原理,並希望能夠解決這一難題。
  • 上海人工智慧「生態森林」枝繁葉茂 AI夢想從這裡起飛
    從徐匯西岸出發,這一本土化、原創性的盛會,正在推動上海駛入「AI高地」的快車道,將上海快速迭代的「AI創新」帶進了全球人工智慧發展的「核心賽道」。與此同時,從技術創新到產業應用,世界對AI未來的矚目,每年盛夏也會齊刷刷地「看上海」。今年,突如其來的全球新冠疫情也無法阻擋這種期待和眺望。明天,2020世界人工智慧大會將在上海、在雲端,盛大啟幕。
  • AI「換臉」有危險(網上中國)
    遊客在上海外灘觀光隧道的未來藝術館的畫作前體驗人工智慧的換臉技術。楊建正攝(人民圖片)一些網絡黑產從業者利用電商平臺,批量倒賣非法獲取的人臉等身份信息和「照片活化」網絡工具及教程。徐 駿作(新華社發)AI「換臉」你玩過嗎?隨著圖像處理和人工智慧技術的發展,不少「換臉」應用走紅網絡。只要動動手指,就可以將自己的臉替換成明星或是朋友的臉。
  • AI「換臉」遊戲火爆,你知道「丟臉」的後果嗎?
    近日,一款基於人工智慧技術的「換臉」APP走紅網絡。使用者只要上傳自己的高清照片,即可將本人面孔與大量影視片段中的明星面孔置換。
  • 不怕,可以AI換臉!國產劇換臉神器來啦
    2019年10月,唐德影視發布公告,稱已與天貓技術籤署了針對電視劇《贏天下》的補充協議,唐德承諾在2019年12月31日前採取包括但不限於:重新布景拍攝、技術手段、重新配音等將該劇原定主要演員在該劇中的鏡頭修改為由天貓技術另行確認的一線演員出演的鏡頭。
  • 一文讀懂AI換臉:鄭爽被封殺,AI能挽救製片人嗎?
    黑科技「AI換臉」或許是個辦法。20日晚,國家廣播電視總局主管重點刊物《廣電時評》在公眾號上刊發文章,稱不會給鄭爽發聲露臉機會。封殺就這麼來了。而據資料顯示,目前鄭爽還有數部待播電視劇和電影,和多部綜藝,其中就有她作為觀察員參與的如今熱播綜藝《追光吧!哥哥》。劣跡被「封殺」確實不足惜,但無論是綜藝還是影視劇,整個過程其實涉及了無數人的勞動心血。
  • 人工智慧列國志|英國:「阿法狗」故鄉,AI滲透各科研領域
    編者按:2020世界人工智慧大會雲端峰會將於7月9日至7月11日舉行。此次大會採用線上為主、線上線下結合的形式,以「智聯世界共同家園」為主題,邀請550餘位演講嘉賓參會,圍繞AI深度賦能行業和AI向善規範發展等話題,討論AI賦能的現狀、難點和未來前景,推動智能時代的傳統行業轉型。
  • 劉亦菲ai換臉,挑戰《西遊記》經典角色,沒想到顏值被吊打
    最近,劉亦菲粉絲ai換臉了朱琳,也就是《西遊記》中女兒國國王這一經典角色,很罕見的劉亦菲顏值被吊打了,劉亦菲粉絲也是自打自臉,「神仙姐姐」的神顏可經不起這麼折騰。換臉。劉亦菲粉絲這次給劉亦菲ai換臉朱琳,應該也是想讓神仙姐姐走進經典之中。但還是很遺憾的翻車了,劉亦菲的神顏也經不起粉絲的這種折騰。