Adobe研發AI繪畫系統LPaintB,一分鐘內手繪達文西藝術畫作!

2020-12-12 中管院數字經濟中心

馬裡蘭大學和Adobe公司研發出了一個新的機器學習系統LPaintB,它能夠在一分鐘內繪畫出達文西、梵谷、維梅爾風格的畫作,並且它的作品都具有很高的真實性和信服力。

6月19日消息,近日,馬裡蘭大學和Adobe研究所的研究人員在Arxi.org上新發表了一篇論文,論文表明,他們研發出了一種新的機器學習系統——LPaintB,它能夠通過自我監督學習,在不到一分鐘的時間內手繪達文西、梵谷、維梅爾風格的畫作。

其研究論文名為《LPaintB:從自我監督中學習繪畫(LPaintB: Learning to Paint from Self-Superision)》 ,於2019年6月17日提交。

值得一提的是,在2018年舉辦的國際機器人藝術大賽中,冠軍CloudPainter機器人的作品使人十分印象深刻,它採用了機器學習技術,能使用多種抽象手法來繪製畫作。

這也向大家證明了,算法在繪畫、素描和雕刻方面都具有人性化的精準度。

一、通過自我監督學習進行訓練

研究論文表明,一方面,隨著非真實感渲染技術的發展,包括基於壁畫的渲染、繪畫渲染、特殊設計以及手工設計的方法,都可以通過應用啟發的方式來模擬繪畫過程。

另一方面,這些算法生成的畫作雖然都非常真實,但研究人員很難將它們擴展到新的或不可見的樣式。因此,研究人員選擇重點構建一個智能繪畫代理,它可以通過一系列繪畫動作,用相同或轉換的樣式向人們再現參考圖像。

在LPaintB的研發過程中,研究人員利用了一種叫自我監督學習的方法。在這種方法中,未標記的數據能與少量標記數據結合使用,以提高學習的準確性,從而使系統能在有限數量的參考圖像上從頭開始訓練代理。

此外,研究人員通過對系統的動作狀態進行數學建模,例如長度、方向等畫筆配置和畫筆大小,並將失敗的目標狀態替換為最終狀態,使系統生成一個具有正向獎勵的配對語料庫。同時,再將生成的語料庫提供給人工智慧模型,使它學會用特定的藝術風格來繪製參考圖像。

▲頂部是參考圖像,底部是AI代理的圖像

二、一分鐘內創作1000×800像素圖像

這個研發過程並不是一帆風順的。

研究人員表示,在通常情況下,系統採樣的行為中只有一小部分具有正向獎勵。但他們用強化學習技術解決了這個問題,該技術能夠使用目標狀態作為配對數據來訓練策略。

但是,通過這項技術生成的策略並不強大,因為用於訓練模型的配對數據只包括具有正向獎勵的行為以及一系列連續行動的結果,並且前者還會讓模型很難從產生負向獎勵的不良行為中恢復過來。

解決這一問題需要讓模型再一次進行強化學習,讓它為有助於泛化模型的行為添加噪聲,並通過獎勵優化了模型的行為。

研究人員經過這一些列的測試和調整,最終使這個人工智慧框架可以通過描述筆畫大小、顏色、和位置信息的參數來執行繪畫動作,並能相應地更新畫布,使用獎勵函數來評估當前狀態和目標狀態之間的距離。

為了編寫訓練數據集,研究人員還從不同比例的參考圖像中隨機抽出特定風格的補丁,並將補丁採樣到固定大小。接著,他們再將這些數據輸入模型,經過一個小時的訓練後,系統能夠在一臺配置16核處理器和英偉達GTX 1080圖形晶片的電腦上重新描繪一副1000×800像素的圖像。

值得一提的是,在系統描繪圖像的過程中,它的畫筆數為2萬,用時不到一分鐘。

三、其他人工智慧在藝術領域的成果

除了馬裡蘭大學和Adobe研發出的LPaintB系統之外,微軟的微軟小冰也具有強大的繪畫能力。

微軟小冰運用了生成式對抗網絡算法(GAN),在學習了人類歷史上236位頂尖畫家的繪畫作品後,進行了長達22個月的作品訓練,最後能通過大量激發源來進行繪畫。

不僅如此,微軟小冰還在今年以「夏語冰」的化名,成功通過中央美術學院碩士畢業生的畢業考試,其作品也在中央美術學院的2019屆研究生畢業作品展上展出。

另外,在模型的訓練方面,LPaintB系統的研究人員表示,訓練模型的泛化高度依賴於訓練數據,並且他們的訓練方法都是基於一個相當基礎的繪畫環境。同時他們還表示,系統的自我監督和強化學習的結合,極大地提高了策略的效率和性能。

在未來的工作中,研究團隊將繼續整合系統的筆畫參數,包括筆畫的大小、顏色以及位置等各個方面,並構建一個基於模型的強化學習框架,該框架可以添加到繪畫模擬器中。

結語:AI繪畫將為設計領域提供源源不斷的創意

LPaintB系統最大的亮點,就在於它能通過自我監督學習的方式,在一分鐘內描繪出一副1000×800像素圖像,並且描繪的作品也極具達文西、梵谷、維梅爾風格的藝術風格。

可見,從CloudPainter機器人到微軟小冰,再到LPaintB系統,如今的人工智慧不僅在工業、醫療等領域有著豐富的應用,它在藝術領域也開始大施拳腳。

今後,在人工智慧進一步商業化落地的進程中,繪畫機器人是否能打破各個行業中隨時會產生的設計瓶頸,在設計領域為人們帶源不斷的藝術創意,這也是值得我們所期待的。

如果您喜歡此類文章,請關注或使用評論功能↓↓

聲明:轉載此文是出於傳遞更多信息之目的。若有來源標註錯誤或侵犯了您的合法權益,請作者持權屬證明與本網聯繫,我們將及時更正、刪除,謝謝。

相關焦點

  • 達文西不僅僅是一名畫家,他的能力超乎你的想像
    ,於是決定把這個任務交給小達文西,小達文西憑藉自己對藝術的理解,僅僅一個月後就交給了父親一個驚人的答案。達文西的父親被兒子的天賦震驚,於是把他把送去了當時被稱為藝術之都的弗洛倫薩,在一家藝術學校學習畫畫,師從大師韋羅基奧,就是後來讓達文西畫三年雞蛋的那位老師。韋羅基奧在當時是個大畫家,不光畫畫水平高,還擅長雕塑、做青銅像。
  • 達文西畫作藝術鑑賞,其中一幅價值一億美元,不是蒙娜麗莎的微笑
    他精通科學、繪畫等,可以這麼說他是天才,是整個歐洲文藝復興的代表人物之一。下面小編給大家重溫一下達文西的代表作。這幅畫改變以往大家對人物畫像側面和半身的造型,而注重人物的感情上。我們來看人物的面部表情,時而高興時而憂傷又好像在哭一樣。整個神態顯得端莊高貴,標準的資本主義婦女。她的微笑輕盈而溫柔,她的眼神就這樣望著你非常的舒服。好像掙脫了束縛。
  • 探秘達文西畫作隱藏的神秘預言
    該畫題材取自聖經故事,尺寸是421cm X 903cm,。這幅在格雷契修道院食堂牆壁上的宏大畫面,嚴整、均衡,而富於變化,無論從構思的完美、情節的緊湊,人物形象的典型塑造以及表現手法的純熟上都堪稱畫家藝術的代表。它也是人類最優秀的繪畫作品之一,由於它的問世而使達文西名揚世界。
  • 尼瑪澤仁:是藏族繪畫領域裡面的達文西
    尼瑪澤仁:是藏族繪畫領域裡面的達文西圖/尼瑪澤仁 文/文涓如今畫壇有一位來自藏族的畫家,他就是尼瑪澤仁。他創作的作品大部分都與西藏有著密切聯繫。後來尼瑪澤仁說:那段時間最害怕失去的就是畫本和筆。▲尼瑪澤仁 作品尼瑪澤仁說:有歷史內容的畫才算是成功的。尼瑪澤仁的繪畫除了表達對歷史和如今遭遇的關注以外,還對人類未來的生活進行了思考。
  • 畫中多了一隻手,並非達文西所畫
    正是因為這些古代繪畫作家的影響,讓中華民族的繪畫文化能夠得到更好的傳承和發揮.今天筆者帶領大家所看的是另外一幅畫,達文西的《最後的晚餐》。達文西的故事最多的就是畫雞蛋,如果你認為他只是一個畫家,那就大錯特錯,他還是一個解剖學的祖宗。當時採用的心臟修復手術,就是從他開始起源。
  • 達文西現存最早的畫作——風景畫的出現
    《阿諾河谷的風景》(1473年),達文西所作,現存最早的畫作日期是1473年8月5日,一位21歲的年輕藝術家決定在他面前畫一幅美麗的託斯卡納風景畫。十幾歲時當學徒的李奧納多現在作為維羅基奧工作室的初級合伙人磨練了自己的技能——維羅基奧更喜歡雕塑,並把工作室的繪畫部分交給了達文西。在1473年的那個夏日裡,李奧納多在把面前的風景畫到紙上之前,顯然做了很多事情。然而,由此產生的這幅畫將成為藝術史上的一個裡程碑——風景首次成為藝術家的中心主題。
  • 上杭武平連城塗鴉手繪牆繪畫專業繪畫【美佳牆繪】
    當某一天你走到一處地方,可能會發現這裡的牆體不一樣,活潑的圖案、明亮的顏色,仿佛這幅畫是有生命的,撞擊著你的心裡,那這一定的手繪牆畫。我相信,如果您見過由美佳彩繪手繪製作的手繪牆畫,一定會讚不絕口的。無論是為了廣告效果,還是為了宣傳效果,手繪牆畫都是很好的表現方式。它不同於傳統的噴繪廣告牆體,死氣沉沉的。
  • 清華大學未來實驗室高峰:「道子智能繪畫系統」背後的科學、藝術...
    高峰認為,科學和藝術不僅可以而且很有必要相通與交融,並對這一理念進行積極實踐,開發出了「道子智能繪畫系統」。「道子」學習大量國畫名家的作品後,可以創作出極具風格的國畫作品。這裡展示的是大概的原理,最左邊是一張馬的照片,最右邊是一張徐悲鴻畫的馬,中間是道子系統生成的繪畫圖像。以馬蹄部分為例,道子確實學習到了徐悲鴻的藝術變形習慣,雖然照片上的馬蹄是一團黑,但生成的繪畫上馬蹄卻用了留白和墨線勾輪廓的技法,能做到這一點我也很驚訝。
  • 達文西曾畫兩幅"蒙娜麗莎" 重疊後有3D效果(圖)
    研究人員認為,這是達文西站在不同的角度畫了這兩幅畫的緣故。   德國研究者克勞斯-克裡斯蒂安·卡本和維拉·海斯林格稱,達文西著名畫作《蒙娜麗莎》可能是世界上首幅3D圖畫,原因是達文西當年畫了兩個不同的版本,當這兩幅畫像相互覆蓋時,在構圖上無論是人物的肖像細節還是背景畫面的描繪都顯示出了一個立體的3D效果。   畫了兩幅《蒙娜麗莎》?
  • 心靈故事:達文西畫蛋的「謎底」
    義大利著名畫家達文西在中學時期,很喜歡繪畫,經常忘乎所以的沉浸自己的世界裡。但是中學即將畢業,大家都在為自己的將來做打算,有的打算從醫,有的打算學習法語,有的打算從事教育,輪到達文西呢,他毅然選擇了繪畫,同學們都嘲笑他,但他並不在乎,因為在他的心裡,一直都相信可以成為著名的畫家。
  • 達文西的《蒙娜麗莎》與中國傳統繪畫有著穿越時空的共鳴
    人民網巴黎12月17日電(記者 葛文博)今年是達文西逝世500周年,長居法國的比利時版畫家、藝術史學家、美術評論家雷爾·維希肯(Karel Vereycken)近日接受人民網記者採訪,闡述其多年研究達文西繪畫技法的心得,認為《蒙娜麗莎》一畫同中國古代繪畫技法異曲同工。
  • 花開疫散,藝術永不止步!歡迎來長沙IFS,遇見李奧納多·達文西
    屆時,通過這種極具視覺震撼力的沉浸式觀展體驗,觀眾帶著好奇和敬佩之心走進這位人類有史以來最偉大的天才藝術家的內心世界,了解他的繪畫創作和他在天文、地理、醫學、建築、自然、水利、機械、軍事等無限領域裡面的探索和收穫。另外,「小小達文西」國際少兒繪畫大賽(長沙站)與展覽同期舉辦。 科技為藝術賦能,讓藝術創作充滿更多想像力。
  • 延安萬達城小小達文西,見證繽紛童趣藝術
    歐洲文藝復興時期三傑之首世界藝術的代名詞多維度重現達文西天才的一生,追尋大師經典2019延安萬達城「天才達文西500年」藝術大展將帶領人們穿越500年與達文西來一場穿越時空的藝術對話他以繪畫聞名於世,從小便表現出極高的天賦每個家庭都有小小藝術家在孩子們眼中,一切都是五彩斑斕的一支筆,可以畫出無限可能
  • 1支畫筆、7種顏料、10+畫作,還有美女藝術家教你手繪生活的顏色
    >我們從父母的手中接過一支筆在桌子上、在牆壁上,在被子上還有的在爸媽的衣服上都會留下的我們稚嫩的筆觸天馬行空的筆畫,無以言表的輪廓這就是屬於你的畫作>每個人都有與生俱來的藝術細胞當你再次看見它時潛在的藝術因子被你召喚甦醒你就是自己生活的藝術家畫畫其實並不是很難
  • 達文西十大詭異的畫,蒙娜麗莎的背後有外星人
    達文西是人類史上最不可思議的全才,是文藝復興時期最完美的代表,而他流傳下來的畫作每一幅都被人研究至今,其中的各種謎團縈繞了人們數個世紀,光是一副蒙娜麗莎就讓無數人淪陷其中,在達文西十大詭異的畫中,每一幅都是傳世佳作,每一幅畫的背後都藏有驚人的秘密。
  • 達文西畫雞蛋的故事是真的嗎 聽說畫了一天就厭倦了?
    「文藝復興三傑」達文西、拉斐爾、米開朗琪羅,三人對於世界的影響力是巨大的。但是對於我們來說達文西就像是從小聽到大的故事一般,達文西是義大利文藝復興三傑之一,也是整個歐洲文藝復興時期最完美的代表。他是一位天才,他一面熱心於藝術創作和理論研究,研究如何用線條與立體造型去表現形體的各種問題,另一方面他也同時研究自然科學,為了真實感人的藝術形象,他廣泛地研究與繪畫有關的光學、數學、地質學、生物學等多種學科。他的藝術實踐和科學探索精神對後代產生了重大而深遠的影響。
  • 達文西,一位被油畫藝術而耽誤的科學巨匠
    除過繪畫,達文西在其它許多領域都貢獻了相當突出的成果,許多成果並不是紙上談兵,而是有實實在在的發明創造來證明。蛋彩畫在配製顏料,給畫面上色時,通常採用雞蛋清來調合研磨成細粉末的天然彩色礦石,這種上色方式有兩個明顯缺陷,一是顏料乾燥得較快,後邊的上色往往不夠細膩和均勻,會影響畫面整體的視覺效果。二是雞蛋清逐漸乾燥後,會導致畫面色澤變暗,還會導致畫面顏色發生龜裂、脫落現象,大大降低作品的完整度和藝術價值。
  • 達文西繪畫中隱藏的數學知識,居然還有這幾層含義
    達文西可謂是文藝復興時期的頂級大師,在他去世後500年的今天,網絡媒體上你只要搜索「達文西」三個字,立馬會出現五花八門的文章,一方面說明「達文西」這三個自帶熱點與流量,另一方面,他確實有點被吹捧上天了。實際上,他的成就是有的,但也沒必要被封神。
  • 從達文西畫雞蛋說起
    達文西、米開朗基羅、拉斐爾是「文藝復興三傑」,達文西是人文精神的開拓者,從達文西對人體的研究和他的繪畫來看,無處不彰顯著對人的尊重、以人為主體的對世界的探索。這與中世紀以神為主體的世界觀形成了鮮明的對比。
  • 放大50倍,多出一隻神秘斷手,並非達文西畫的
    古詩中提到:「世間無限丹青手,一片傷心畫不成」。這句話的意思是說:「作者認為世界上所有善於繪畫的畫家們,可能都畫不出人們心中的那一片傷感」。相信這位作者可能沒有見過達文西的繪畫魅力,至今科學和繪畫技術已經十分發達,人們對於達文西的一系列畫作,可能都沒有辦法解析。