線稿智能上色,一鍵嵌入品牌廣告,「喵圖」的「AI+動漫」能獲得市場...

2020-12-22 36氪

在《不要小看日本的AI公司》這篇文章中,有提到一家日本公司「PaintsChainer」,他們利用AI算法為漫畫線稿上色。用戶只需上傳一張黑白線稿,便可生成不同風格的畫稿,其中文網站已上線。

PaintsChainer

通過瀏覽官網,我們發現PaintsChainer支持「提取線稿」、「指定上色顏色」、」指定上色風格「以及在pixiv Sketch中自動上色。

在此前對黑咔相機的融資報導中,36氪在文末提到了喵圖,一家計算機視覺團隊,他們與上文的PaintsChainer一樣切入動漫行業並於近期推出了一款為動漫線稿智能上色的APP。

以下是喵圖為線稿上色的效果:

經測試,喵圖APP的單張線稿的渲染時間在0.5~1秒之間,PaintsChainer需要3~5秒。

對於線稿上色,36氪過去也有過報導與了解。

在動漫製作的流程中,線稿上色處於腳本創作、分鏡與線稿之後。由於門檻不高但卻極度耗時,一般由初入行的畫師負責。近年來隨著國內動漫作品數量的暴增,動漫CP對上色人員的訴求也愈來愈大,但人工成本的攀升與有限的上色效率成為了制約動漫內容提高產量的障礙。

喵圖CEO馬慕晗認為,上色環節雖然繁雜耗時,但每部作品的畫風與筆觸幾乎一致,這對善於學習和模擬的AI會是個很好的應用場景。他向36氪列舉了一組數字:一部25分鐘標準的動漫,每秒約12副圖,每集會有18,000副圖,一位熟練的上色師一天工作10個小時,平均能完成20~30副,一個10人的團隊不算後期,周末不休需要2個月時間;但是如果用人工智慧的方式,在目前喵圖的算法與算力基礎下只需要150分鐘,相比人工操作,提升2000倍的效率。不過馬慕晗也提到,AI渲染後依然需要人工去複查,輔助機器。

毫無疑問,對於動漫行業,機器為線稿自動上色將對內容產出的效率有極大的提升作用。

基於計算機視覺技術和二次元領域數據的積累,喵圖在業務上開拓了兩個主要板塊,其一是以自動上色技術為核心的動漫製作加速服務,主要為動漫CP輸出產能,提高作品製作效率並收取服務費用。

受限於動漫行業缺乏統一的製作規範以及每部作品的風格都不同,短期內該技術會以項目制為主,同時喵圖也在嘗試推出批量化製作需求的工具平臺,希望能夠定義一套高效的製作流程。

第二個板塊,即跳出為製作方服務的局限,面向平臺方利用圖像識別算法的能力提供內容增值服務,核心是提升行業盈利能力。

展開說,喵圖會基於對動漫內容的識別與理解,為平臺內容提供動態的交互式體驗和嵌入式廣告,提昇平臺長尾流量的變現能力,比如基於對人物及場景的識別與理解,精準推送或植入與情節相關的廣告。這一模式在視頻領域和直播領域已有成功應用,在落地動漫領域時,商業模式還需驗證。

相比第一個方案,第二個方案更具備實現規模化營收的潛力,喵圖正在同時推進這兩條業務線。

算法層面,喵圖與36氪之前報導過的Versa和黑咔相機類似,都是基於圖像識別的算法,先做人景分離,再做區域識別,即結構化上色目標並理解區域語義,最後用風格遷移的算法將學習的樣本風格給線稿上色,難度並不大。

喵圖的最大優勢在於積累了大量動漫領域的垂直數據,包含了人物數據、場景數據、人物內部細粒度的標記數據以及漫畫文本數據,這些數據的沉澱直接影響最終的渲染效果,也能保證喵圖在整個領域的先發優勢。

動漫產業對效率的提升的需求是客觀存在且急迫的,不僅是動漫CP本身,平臺也希望能夠通過提升動漫內容的更新頻次進一步提昇平臺的活躍度並孵化更多新的內容。

與此同時,需求雖然客觀存在,但動漫內容創作是一個勞動力密集產業,利潤率並不高,因此會出現有付費意願但沒有付費能力的普遍情況。36氪認為,在動漫產業,內容生產效率的提升必須與行業盈利能力的提升同步推進。

最後簡單為大家介紹喵圖科技的融資歷史與團隊。

喵圖科技曾於2017年12月完成天使輪融資,投資方為雲天使基金,目前正尋求1200萬人民幣的Pre-A輪融資,用於團隊擴招以及B端產品的迭代。團隊方面,創始人兼CEO馬慕晗本科畢業於清華大學產品設計專業,研究生畢業於美國伊利諾伊理工大學設計學院(全美排名第一設計研究生院),主修產品設計,後在微軟研究院從事圖像處理與技術研發,負責產品設計和算法編程。

相關焦點

  • 喵圖APP的正確打開方式 完美上色玩轉AI
    喵圖APP的線稿廣場   上傳線稿後,先選擇配色方案一鍵上色,頁面最下方的配色輪盤提供22種配色風格,蘿莉風、御姐style、暗黑系……你想要的喵圖都有!一鍵上色後的線稿已初具規模,但是為了滿足每個漫迷的審美需求,配色做到更加精緻,喵圖APP支持手動調整優化功能。   自主配色第一步,選擇顏色。點擊彩圈一次選中該顏色,點擊兩次則會調出全部顏色的色板,左右滑動選顏色,上下滑動選明暗。
  • 喵圖科技:利用AI技術為漫畫線稿智能上色,幫助畫師增效2000倍省時80%
    利用喵圖科技軟體實現的黑白線稿自動上色基於AI技術在算法和大數據方面的特點,喵圖科技將人工智慧圖像處理技術跟動漫產業相結合,以提高畫師的創作效率、節約時間成本。通過AI智能上色,每張只需0.5秒,近2萬張畫作只需不到三個小時即可完成,效率提升了2000倍,節省了80%的繪畫時間。儘管AI能夠不斷學習優秀畫面的上色風格並運用到新的作品當中,但是,由於線稿只給出了物體的大概輪廓,不包含光影、紋理等信息,AI的上色難度就可想而知。
  • 0.7秒,完成動漫線稿上色
    並且是已經正式「出道」的那種——在愛奇藝自製輕動畫《吞噬永恆》中,這隻自動上色AI就已經落地應用,施展了自己的才能。所以,這樣一隻AI的「上色靈感」源自何處?具體的上色手法,就像這樣:雖然啪一下很快的,但其實愛奇藝智能上色引擎對人類老司機很「講武德」——提供了分圖層的輸出模式,專業畫師可以輕鬆在AI的基礎上靈活調整上色細節。
  • 揭秘線稿自動上色 喵圖科技突破GPU模型壓縮技術
    原標題:揭秘線稿自動上色 喵圖科技突破GPU模型壓縮技術   人工智慧進軍動漫產業,可以助力整個行業,讓動漫日更、優化動漫視效?   來自喵圖科技的算法研發團隊給出了深度學習在動漫領域的研究進展,開發了一套在壓縮GPU顯存的情況下,通過人工智慧給漫畫線稿優化線條、自動上色的技術。   訓練機器自動上色,生成效果「以假亂真」!   研究團隊使用生成對抗網絡(GAN)完成上色任務,達到與人工作畫相近的效果。
  • 人工智慧進軍動漫產業 揭秘喵圖科技自動上色
    人工智慧進軍動漫產業,可以助力整個行業,讓動漫日更、優化動漫視效?  來自喵圖科技的算法研發團隊給出了深度學習在動漫領域的研究進展,開發了一套在壓縮GPU顯存的情況下,通過人工智慧給漫畫線稿優化線條、自動上色的技術。  訓練機器自動上色,生成效果「以假亂真」!
  • 動漫人物線稿如何上色?線稿上色步驟參考
    動漫人物線稿如何上色?線稿上色步驟參考!在畫完角色後,是不是存在隨便配置背景的情況呢?例如,有使用鏡頭來嘗試遠近感的配合嗎?有意識到光源與陰影來配置高光與反射光嗎?在意識到這些後對作品品質的提升是非常明顯的。
  • 動漫線稿如何畫流暢?上色都無法掩蓋的流暢!
    動漫線稿如何畫流暢?上色都無法掩蓋的流暢!畫師白佐倉おりこ作品來了,白佐倉おりこ的動漫線稿畫得特別棒,畫動漫線稿可以參考白佐倉おりこ的作品,喜歡畫師白佐倉おりこ的小夥伴別錯過哦,畫師白佐倉おりこ的作品很受歡迎,畫師白佐倉おりこ的動漫線稿都相當棒,臨摹學習的時候存一下畫師白佐倉おりこ的作品準沒錯,下面進入今天畫師白佐倉おりこ的作品分享吧,一起感受畫師白佐倉おりこ的筆下世界!
  • 畫動漫插畫只會線稿不會上色怎麼辦?
    畫動漫插畫只會線稿不會上色怎麼辦?當然是涼拌啦!其實不管、無論是畫哪一種風格的插畫都需要學習正確的色彩理論和光影,尤其是光,光是最重要的,就算是黑白畫,只要光影足夠有趣同樣也可以到達不錯的效果。輕微課網站上有很多的上色方面的學習課程,你可以去看一下!其實每個人的上色方法都是不同的,因為用到的技法和筆刷不一樣,所以畫風也有所不同,不過自己上色方法一定是建立在正確的方法之上的,不然就是我流。推薦一個網站:畫師通,這是一個畫師作品發布的網站,你可以多看看大神的作品,提高自己對色彩的感覺!
  • 黑白變彩漫,讓AI為你心愛的角色們上色!
    90年代受美國、日本動漫影響的少年,如今正在成為動漫影視作品的主要消費群體。他們具備高付費意願和消費能力,且更傾向於選擇文娛消費內容。此外,隨著近年來大批網際網路動漫平臺和新媒體的興起,傳統動漫的形式也在不斷翻新,例如動漫閱讀網站、彈幕視頻網站、動漫閱讀App等。
  • 插畫人物著色教程,如何為動漫插圖人物添加顏色?
    想必這些都是繪畫初學者們經常在想的問題吧,就是不知道如何才能繪畫好皮膚,知道上什麼顏色比較好,但是畫出來卻不是那種感覺,那麼今天藝學繪老師就在網絡上收集整理了一些關於如何繪畫動漫人物皮膚的教程給大家,動漫人物皮膚的上色技巧,教程非常簡單,趕緊來看看叭:「推薦」二次元人物如何上色?動漫人物皮膚的上色技巧「推薦」二次元人物如何上色?
  • 超火的漫畫線稿上色AI最新版來了(視頻教程)
    這是目前最好的線稿上色AI工具,由蘇州大學和香港中文大學的團隊創造,作者提供線上APP和中文教程,趕緊來試試吧!還記得那個給本子上色的Style2paints嗎?這是目前最好的線稿上色AI工具,沒有之一。
  • 超火的漫畫線稿上色AI出新版了!無監督訓練,效果更美好 | 代碼+Demo
    夏乙 安妮 編譯整理量子位 出品 |給喜歡的動漫形象建個了收藏夾,裡面收集她的各種圖片……懂,誰沒幾個喜歡的動漫萌妹呢。一些手繪線稿也很可愛,但黑白配色總會略顯單調。△ 請記住這張線稿半年前線稿上色AI style2paints的破殼曾讓自動上色火了一陣。
  • 骨頭社新作動畫「噬魂師NOT!」3位女主角人設線稿公開
    骨頭社新作動畫「噬魂師NOT!」3位女主角人設線稿公開 動漫 178動漫頻道 ▪ 2014-01-15 11:09:17
  • 這是目前最好的線稿上色AI工具-電子發燒...
    這是目前最好的線稿上色AI工具,由蘇州大學和香港中文大學的團隊創造,作者提供線上APP和中文教程,趕緊來試試吧! 還記得那個給本子上色的Style2paints嗎?這是目前最好的線稿上色AI工具,沒有之一。 Style2paints由蘇州大學和香港中文大學的團隊創造,現在,作者發布了它的V4版本。
  • 線稿與上色圖的基本三部曲
    線稿,以黑色為主色調,整幅畫面簡單、清晰,但也有些單調。上色圖,加上顏色後,畫面顯得豐富、生動,但也偶爾會感覺甜膩。線稿和上色圖,在不同的時候會有不同的用途。下面是我分享的女生節前畫的幾幅女孩簡筆畫(線稿與上色圖對比)。畫好一幅畫,線稿是基礎。就像蓋房子一樣,線稿是地基。基礎畫不好,上色後雖然會與眾不同,但也難以實現整幅畫的美感。當然,上色也有講究。隨著自己心意來天馬行空地上色,固然爽快,但也容易造成畫面顏色雜亂無章。
  • 用人工智慧給線稿上色,結果這麼神奇嗎?!
    大家好,我是小木~今天給大家推薦自動給線稿上色的軟體。首先這是一張沒有上色的線稿:然後這是使用軟體自動上色後的效果:如果你對生成的結果不滿意,還是能進行人工幹預的。左邊這裡的列表可以選擇上色風格。如果列表這些顏色風格還是不能滿足你的要求,左下角有個上傳按鈕,可以上傳一張你想要的圖片作為參考。
  • 秋番「萌萌侵略者OUTBREAK COMPANY」主角人設線稿公開
    秋番「萌萌侵略者OUTBREAK COMPANY」主角人設線稿公開 2013-07-
  • 繼AI生成二次元頭像之後,新一代線稿上色AI來襲
    amp;amp;amp;amp;quot;https://static.leiphone.com/uploads/new/article/pic/201709/786f01fd3b91a95fba8268df6bd874a9.jpg"/>然後就在這個時間,我上谷歌圖片搜索關鍵詞「Anime Sketch」(動漫線稿
  • AI教育,撬動智能家居萬億市場的支點
    2019年,全球著名的信息技術、通信行業和消費科技市場研究機構Strategy Analytics發布的調研報告,預計到2023年,消費者在智能家居硬體、服務、安裝上的費用支出將達到1570億美元(超1萬億元人民幣)。
  • AI智能小程序開發方法、使用場景
    AI智能小程序在信息展示、商務社交、引流獲客方面都能給企業帶來很多便利,因此目前不少企業都開始製作自己的智能小程序了。通過這種小程序,企業的業務人員可以有自己的微信智能名片,與客戶交流也方便。上線了小程序案例,禁止轉載如何製作一個這樣的智能名片?找一個簡單的名片小程序製作工具,比如「上線了」,註冊帳號後點擊「創建小程序」,選擇【超級雲名片】模板類型。