品質超高!超火的漫畫線稿上色AI最新版來了(視頻教程)

2020-12-27 新智元

新智元報導

來源:GitHub

作者:lllyasviel 編輯:肖琴

【新智元導讀】Style2paints V4版本來了!這是目前最好的線稿上色AI工具,由蘇州大學和香港中文大學的團隊創造,作者提供線上APP和中文教程,趕緊來試試吧!

還記得那個給本子上色的Style2paints嗎?這是目前最好的線稿上色AI工具,沒有之一。

Style2paints由蘇州大學和香港中文大學的團隊創造,現在,作者發布了它的V4版本。

發布上一個版本時,作者在知乎專欄中寫道:「藉助人工智慧,任何人都能快速給漫畫上色的時代真的到了! 」

「您現在看到的是人工智慧界目前唯一一個真正能夠讓任何人都可以快速(15 分鐘一頁的速度)給自己喜歡的本子上色的技術。本文技術發布之前的任何人工智慧技術都做不到這一點。」

而style2paint V4的效果之前的版本更好,也超越了同類模型Paintschainer。

style2paints V4的想法很簡單:在標準的人類工作流程中進行上色,想這樣:

填充顏色>>添加顏色漸變>>添加陰影

作者設計了一個白盒系統,將三個分開的pipeline組合在一起,進行顏色填充、製作顏色漸變和渲染。

該系統的強處:

最高的質量。在針對53個草圖和6位使用者的用戶研究中,style2paint V4在100%的情況下擊敗了所有之前版本的style2paint和所有之前版本的paintschainer。廣泛分布的用例。style2paint V4的輸出是層。藝術家可以從結果中選擇他們需要的層。style2paint V4是第一個實現這一點的AI系統。魯棒性。在這個GitHub庫中展示的所有結果都是來自不同國家的藝術家和Twitter用戶使用現實中的線稿生成的。來自真實生活中的twitter用戶的結果比其他任何東西都更令人信服。

不足之處:

無法處理整頁漫畫。因為模型是在線稿上訓練的,所以我們的系統不能給大多數整頁漫畫上色。整頁漫畫可以用MangaCraft。對於歐美漫畫的線稿比較弱。仍然不能給非常複雜的線稿上色。

GitHub:https://github.com/lllyasviel/style2paints

漫畫家的強大AI助手:獲得分層結果

與以往的端到端image-to-image的轉換方法不同,style2paint V4是第一個在現實生活的工作流中對線稿進行著色的系統,而且,它的輸出是分層的。

輸入:

線稿圖人類提示(可選)顏色樣式參考圖像(可選)光線位置和顏色(可選)

輸出:

無線條自動顏色展平黑色線條自動顏色展平無線條自動著色黑色線條自動著色彩色線條自動著色自動渲染(分層)自動渲染著色

Style2paint V4提供了目前最高質量的結果。並且,你可以從系統中分離出不同的層,這些層可以直接用在你的繪畫工作流程中。

與以往的人工智慧上色處理工具不同的是,Style2paint V4的結果不是單一的』JPG/PNG』圖像,而是是』PSD』層。

作者提供了在線APP,試用請戳:http://s2p.moe/

用戶指南:https://style2paints.github.io/

大多數人類藝術家都很熟悉給漫畫線稿上色的工作流程:

草繪->顏色填充/展平->添加漸變/細節->陰影

對應的層是:

lineart layers + flat color layers + gradient layers + shading layers

style2paint V4正是為這個標準的著色工作流程而設計的!在style2paint V4中,你可以獲得每個步驟的結果!

示例

這裡我們用ABCD格式展示了一些結果。用戶只需要上傳自己的草圖,選擇一個樣式,然後選擇一個光源。

無需人類色彩校正的情況下,結果立即就能得到。

如果需要色彩校正,用戶可以很容易地在畫布上添加一些色彩提示來指導AI的著色過程。

在這個示例中,我們將這些結果視為半自動的。如果半自動的結果中,人類色彩提示點的數量小於10,則認為這些結果是幾乎全自動的。

以下的示例中,大約一半的結果是全自動的,其餘是幾乎全自動的結果。

並且,以下所有結果都只需不到15次滑鼠點擊即可完成。

請看視頻演示:

瀏覽器版本過低,暫不支持視頻播放

視頻完全是屏幕錄製,沒有任何修改或速度修改。

示例1

從視頻的11:28開始。

所有人類局部顏色修改:只需3次點擊。

*CC-BY-NC-SA-4.0 (c) Various artist of style2paints team, 2018. This image is OK for ACM/IEEE fair use.

示例 2

在視頻的06:19開始。

所有人類局部顏色修改:只需2次點擊。

*CC-BY-NC-SA-4.0 (c) Various artist of style2paints team, 2018. This image is OK for ACM/IEEE fair use.

示例 3

從視頻的01:40開始。

所有人類局部顏色修改:只有6次點擊。

*CC-BY-NC-SA-4.0 (c) Various artist of style2paints team, 2018. This image is OK for ACM/IEEE fair use.

示例 4

從視頻的00:42開始。

無人類局部顏色修改。

*CC-BY-NC-SA-4.0 (c) Various artist of style2paints team, 2018. This image is OK for ACM/IEEE fair use.

示例 5

從視頻的02:57開始。

無人類局部顏色修改。

*CC-BY-NC-SA-4.0 (c) Various artist of style2paints team, 2018. This image is OK for ACM/IEEE fair use.

示例 6

從視頻的07:57開始。

所有人類局部顏色修改:11次點擊。

示例 8

從視頻的04:27開始。

所有人類局部顏色修改:只需3次點擊。

示例 9

從視頻的09:46開始。

所有人類局部顏色修改:只需5次點擊。

*CC-BY-NC-SA-4.0 (c) Various artist of style2paints team, 2018. This image is OK for ACM/IEEE fair use.

Style2Paints V4 教程

作者提供了Style2Paints V4 教程,任何人都能在十分鐘內學會!

你只需要一張線稿:

*CC-BY-NC-SA-4.0 (c) Various artist of style2paints team, 2018. This image is OK for ACM/IEEE fair use.

然後上傳,選擇一個合適的AI畫師,然後,事情就變成了這樣:

你可以滾動滾輪,右鍵拖拽畫布,來查看細節;通過左鍵點擊來添加提示點來控制局部顏色;點擊上色按鈕來刷新上色結果。

值得一提的是,最新版本的軟體提供細心模式和粗心模式:careful mode (細心模式) careless mode (粗心模式)

在細心模式 (careful mode)中,人工智慧會細心的塗抹平滑,精細的顏色。但是這個模式下的人工智慧會限制自我的發揮來迎合人類。

在粗心模式 (careless mode)中,人工智慧會自己發揮,但是可能細節上會出現丟失。同時可能人工智慧會反抗你的提示。

完整教程地址:

https://style2paints.github.io/README_zh

GitHub:

https://github.com/lllyasviel/style2paints

在線APP:

http://s2p.moe/

新智元 AI 技術 + 產業社群招募中,歡迎對 AI 技術 + 產業落地感興趣的同學,加小助手_2 入群;通過審核後我們將邀請進群,加入社群後務必修改群備註(姓名 - 公司 - 職位;專業群審核較嚴,敬請諒解)。

相關焦點

  • 超火的漫畫線稿上色AI出新版了!無監督訓練,效果更美好 | 代碼+Demo
    一些手繪線稿也很可愛,但黑白配色總會略顯單調。△ 請記住這張線稿半年前線稿上色AI style2paints的破殼曾讓自動上色火了一陣。好消息是,昨天,升級版本style2paints 2.0也問世了!
  • Style2paints V4版本來了!這是目前最好的線稿上色AI工具-電子發燒...
    這是目前最好的線稿上色AI工具 李倩 發表於 2018-11-20 09:40:27 Style2paints V4版本來了!
  • 0.7秒,完成動漫線稿上色
    厚塗不在話下,換種漫畫上色風格,只要給出示例,這隻AI也能迅速get到靈魂。而這,還不是Ta的全部實力。有別於業內針對靜態漫畫的上色AI,這個來自愛奇藝的智能上色引擎,還能用來給動態漫畫賦上前後風格統一的色彩。
  • 用人工智慧給線稿上色,結果這麼神奇嗎?!
    大家好,我是小木~今天給大家推薦自動給線稿上色的軟體。首先這是一張沒有上色的線稿:然後這是使用軟體自動上色後的效果:圖片來源:@pikachu156如果你沒有線稿,你還可以先使用3D軟體使用提取邊緣模式,先渲染一份線稿,再導入到style2paints來進行上色:
  • 喵圖科技:利用AI技術為漫畫線稿智能上色,幫助畫師增效2000倍省時80%
    利用喵圖科技軟體實現的黑白線稿自動上色基於AI技術在算法和大數據方面的特點,喵圖科技將人工智慧圖像處理技術跟動漫產業相結合,以提高畫師的創作效率、節約時間成本。一方面,漫畫消費群體快速增長,漫畫平臺迅速增多;但另一方面,製作一部精良的漫畫費時持久。據慕晗介紹,漫畫創作大致需要以下幾個步驟,從劇本、分鏡、線稿,之後交給上色助理進行上色並且進行後期處理,其中上色部分需要用的時間一般要佔到工作時長的20%-30%,主要為一些創造力很低的重複填色過程。
  • 動漫人物線稿如何上色?線稿上色步驟參考
    動漫人物線稿如何上色?線稿上色步驟參考!在畫完角色後,是不是存在隨便配置背景的情況呢?例如,有使用鏡頭來嘗試遠近感的配合嗎?有意識到光源與陰影來配置高光與反射光嗎?在意識到這些後對作品品質的提升是非常明顯的。
  • AI人工智慧 處理圖片能做什麼?上色,變彩色,變清晰
    黑白的線稿又是哪裡來的?我在百度上搜索花朵時,搜索到了如下圖片。我用它的體驗:基本上,一張像素信息不足,很低品質的照片,上色很淡。我在網上下載到一張 民國時期,溫州南洋照相館結婚照片。/index_en.html 線稿上色B Style2paintshttps://pan.baidu.com/s/15xCm1jRVeHipHkiB3n1vzA黑白照片變彩色https://colourise.sg/#colorize APP你我當年
  • 線稿智能上色,一鍵嵌入品牌廣告,「喵圖」的「AI+動漫」能獲得市場...
    在《不要小看日本的AI公司》這篇文章中,有提到一家日本公司「PaintsChainer」,他們利用AI算法為漫畫線稿上色。用戶只需上傳一張黑白線稿,便可生成不同風格的畫稿,其中文網站已上線。PaintsChainer通過瀏覽官網,我們發現PaintsChainer支持「提取線稿」、「指定上色顏色」、」指定上色風格「以及在pixiv Sketch中自動上色。
  • 線稿與上色圖的基本三部曲
    線稿,以黑色為主色調,整幅畫面簡單、清晰,但也有些單調。上色圖,加上顏色後,畫面顯得豐富、生動,但也偶爾會感覺甜膩。線稿和上色圖,在不同的時候會有不同的用途。下面是我分享的女生節前畫的幾幅女孩簡筆畫(線稿與上色圖對比)。畫好一幅畫,線稿是基礎。就像蓋房子一樣,線稿是地基。基礎畫不好,上色後雖然會與眾不同,但也難以實現整幅畫的美感。當然,上色也有講究。隨著自己心意來天馬行空地上色,固然爽快,但也容易造成畫面顏色雜亂無章。
  • 喵圖APP的正確打開方式 完美上色玩轉AI
    首先,點擊屏幕下方功能欄中的畫筆圖標,在線稿廣場中拍照上傳[我的線稿],或者選擇平臺推薦的優秀線稿作品,還有多種分類標籤幫你檢索哦,用戶也可以自己創建標籤,熱門標籤會被推薦至線稿廣場。   喵圖APP的線稿廣場   上傳線稿後,先選擇配色方案一鍵上色,頁面最下方的配色輪盤提供22種配色風格,蘿莉風、御姐style、暗黑系……你想要的喵圖都有!
  • 陰陽師:日服兩周年線稿上色比賽,終於可看到鬼切染色版
    陰陽師自公測到現在,目前已經是兩年多了,那麼最近在日服官方為了紀念兩周年,出了一個線稿上色的比賽,協同畫師一起來舉辦,現在也給可以p站中看到,總之就是根據官方給出的線稿,然後進行上色,之後會評比進行比賽,獎勵是遊戲內的勾玉跟禮品卡,看樣子似乎挺有趣,讓我們一起來看看相關的信息。
  • 畫畫怎麼快速上色?插畫如何上色?超簡單的插畫上色技法!
    學畫畫不會上色那怎麼能行?上色是我們學習繪畫的一個重點。畫完線稿後,不知道怎麼給它上色,會把顏色弄髒的。這是許多初學者經常遇到的問題。小夥伴們不要怕犯錯誤,更不要怕畫錯。畢竟,改畫也是正常的事情。學會畫畫就是要勇於發現問題,解決問題,這樣才能得到有效的提升。怎麼畫畫?如何搭配顏色?
  • 繼AI生成二次元頭像之後,新一代線稿上色AI來襲
    AI裡面,一共點擊9次上傳按鈕,9次上色按鈕,大約10分鐘後,我有了9張線稿的不同色彩構圖。我們成功實現了基於語義信息遷移的顏色提示,這個技術使得上色的色彩變得很和諧。這個技術最早是2017年1月左右早稻田和UCB都有相關研究的一個應用於黑白照片上色的trick。但是anime線稿上色是非常非常嚴酷的挑戰,很多機構都有所嘗試,包括今年六月的DWANGO(niconico的母公司),東大在內的一些機構都嘗試了遷移式上色,但是都停留在了從結果裡面精挑細選的程度,並不能直接運用起來。
  • 刺客信條上色大賽現已開啟
    隨著全新短篇漫畫《刺客信條:王朝》和《刺客信條:英靈殿》的陸續連載,其出自漫畫名家許先哲、張肖以及馮紫蘇之手的精美畫作和引人入勝的故事情節都讓廣大粉絲、讀者津津樂道。今天,育碧攜手新漫畫、優動漫共同宣布第一屆「刺客信條上色大賽」已於今日正式開啟徵稿。
  • 揭秘線稿自動上色 喵圖科技突破GPU模型壓縮技術
    原標題:揭秘線稿自動上色 喵圖科技突破GPU模型壓縮技術   人工智慧進軍動漫產業,可以助力整個行業,讓動漫日更、優化動漫視效?   來自喵圖科技的算法研發團隊給出了深度學習在動漫領域的研究進展,開發了一套在壓縮GPU顯存的情況下,通過人工智慧給漫畫線稿優化線條、自動上色的技術。   訓練機器自動上色,生成效果「以假亂真」!   研究團隊使用生成對抗網絡(GAN)完成上色任務,達到與人工作畫相近的效果。
  • 黑白變彩漫,讓AI為你心愛的角色們上色!
    奇蹟AI自動上色工具,利用AI技術為黑白線稿上色,每張只需0.5秒,節省了80%的繪畫時間,讓創作更高效。現奇蹟AI自動上色功能開放公測,關注「奇蹟AI」微信公眾號即可親自體驗,AI一鍵上色,黑白變彩漫,快來給你喜歡的漫畫塗色吧~各位畫師大大們也可以用我們的奇蹟AI來給自己的手繪或者線稿來一鍵搞定上色,再不為上色禿頭!
  • 喵醬漫畫課堂 | 從線稿到上色教你畫Q版草莓少女,快來get你的夏日甜心!
    今天我們來畫一個超級Q萌的草莓少女吧首先我們來看一下畫Q版人物頭部的幾個基礎技法這部分是重點!3,用弧線歸納出頭髮的造型,從劉海開始繪製頭髮,給小女孩畫出超Q的丸子頭,用三角形在頭頂兩側畫出超萌的貓耳朵,再畫出可愛的草莓髮飾和裝飾物,讓畫面更完整。草稿就結束啦,用勾線筆細化就可以得到線稿啦!
  • 動漫線稿如何畫流暢?上色都無法掩蓋的流暢!
    動漫線稿如何畫流暢?上色都無法掩蓋的流暢!畫師白佐倉おりこ作品來了,白佐倉おりこ的動漫線稿畫得特別棒,畫動漫線稿可以參考白佐倉おりこ的作品,喜歡畫師白佐倉おりこ的小夥伴別錯過哦,畫師白佐倉おりこ的作品很受歡迎,畫師白佐倉おりこ的動漫線稿都相當棒,臨摹學習的時候存一下畫師白佐倉おりこ的作品準沒錯,下面進入今天畫師白佐倉おりこ的作品分享吧,一起感受畫師白佐倉おりこ的筆下世界!
  • ps漫畫眼睛怎麼上色?新手必備教程
    ps漫畫眼睛怎麼上色?新手必備教程!眼睛上色怎樣才能畫得讓人眼前一亮?畫畫與其他學科一樣的地方就是,你得捨得投入精力。當然也得結合自己的天賦與理解力。那麼漫畫人物繪畫入門眼睛怎麼上色?眼睛上色怎樣才能畫得讓人眼前一亮?
  • 成本50元/P的漫畫月產10000P能靠三轉二、AI上色、等新技術實現嗎
    喜悅動漫CTO兼遊戲動漫業務副總裁弓振濤介紹,引擎技術主要解決了漫畫製作中期和後期的環節,把分鏡、線稿、上色、勾線、後期處理等傳統流程壓縮成一個步驟,並能夠半自動化完成這個步驟。而依據漫畫內容題材的不同,也可以渲染出不同的風格效果來,例如少年熱血漫畫,多打鬥鏡頭和鎧甲兵刃,喜悅動漫使用次世代渲染,生成厚塗畫風的漫畫效果更好;瑪麗蘇漫畫,或是古風的少女漫,角色更柔美,還有長發飄帶等細節,因此使用卡通渲染引擎,利用大色塊光和影,生成平塗賽璐璐風格的漫畫更適合。也就是說,不像三維動畫常常給人以千人一面的印象,三維引擎創作的漫畫風格是可控的。