從人體3D建模和測量入手,雲之夢要用虛擬試衣解放量體師和服裝導購...

2020-12-14 雷鋒網

雷鋒網「新智造」按:雷鋒網正在啟動「新智造成長榜2017」評選活動,我們將對人工智慧與機器人行業進行大規模報導、梳理和調研,並聯合數十家著名投資機構根據這些創新公司的技術實力、商業能力和成長性進行深度評選,最終從多個領域分別選出一些極具潛力成長性的創新公司。本文為雷鋒網「新智造」對報名成長榜的企業「雲之夢科技」的報導,講述其如何從人體3D建模和測量入手,發力虛擬試衣,並積極探索技術在虛擬換髮型、直播背景實時替換、智能安防落地的故事。如果你想參與我們的評選,可點擊「報名」連結,或通過郵箱xinzhizao@leiphone.com聯繫我們!

2011年,思科發布了一個視頻,一個女生站在一面鏡子前,直接隔空揮手、點擊就能試穿不同系列、款式、顏色的衣服,「試穿」出滿意的衣服後,直接付款就能買下。

深圳雲之夢科技創始人董波深知這個視頻給服裝行業從業者帶來的震撼和「誘惑」,在走上技術創業道路前,他在服裝配飾行業已經有10餘年的從業經歷,並為ZARA、沃爾瑪和迪士尼做過貼牌代工,他甚至創立了自己的品牌「卡洛迪」。

不過,2008年的金融危機直接讓董波的公司遭遇重創,為了讓企業轉型重新走上正軌,他說自己幾乎嘗試了所有的辦法。而在服裝行業多年,對於庫存風險以及當季爆款嚴重依賴設計師經驗的情況,他有非常深的體會。所以,嘗試「虛擬試衣」,幫助服裝電商企業增加銷量,減少退換貨,同時,用試衣的數據反過來指導設計,減少新產品的不確定性,也是他非常關注的點。

董波告訴雷鋒網新智造,早在2012年,他就組建了一個10幾人的技術團隊,研發虛擬試衣軟體,一開始,他從自己最熟悉的服裝配飾入手,後來又擴展到服裝。2014年,雲之夢科技正式成立,成為了一家專注於人體感知與大數據應用的創業公司。

3D人體測量建模系統:5秒鐘完成全維度人體3D建模

雲之夢的技術路線和思科的概念視頻類似,通過深度攝像頭對人的體形、姿態包括外貌等進行識別、理解和恢復,有了人體三維模型,再通過對衣服的數字建模,用戶就可以在「智能試衣鏡」前進行虛擬試衣。

為了讓人體三維模型的創建更快、更準確,雲之夢一開始就著重建立自己的人體資料庫,目前,他們已經採集了幾千個人體三維模型數據,這些數據可以讓算法迭代更準確。

2014年,剛剛拿出初代產品,在高交會上展出的雲之夢引起了一位從新加坡遠道而來的計算機視覺領域的博士的關注,他就是後來加入雲之夢並擔任CTO的呂江波。從浙江大學畢業後,呂江波在比利時魯汶大學獲得了博士學位,之後成為美國伊利諾伊大學香檳分校(UIUC)下屬的新加坡高等研究院(ADSC)招募的首位研究人員。他聯合領導並從事「動態大場景中的視覺數據建模與分析」的研究工作。他還是視頻技術的著名國際學術期刊IEEE TCSVT編委、2012年度榮獲最佳編委獎,同時,他也是IEEE的高級會員。

對於自己研究過的領域,呂江波充滿了興奮,他告訴雷鋒網新智造,「動態大場景中的視覺數據建模與分析」可以應用於無人機、機器人等各個領域,讓機器看懂更複雜的情況。在做研究的過程中,他也一直在關注怎樣把所研發的東西應用於實際,最終,他在2016年正式加入雲之夢,並從新加坡舉家來到深圳。

目前,雲之夢的虛擬試衣既有在線版軟體,也有線下的「虛擬試衣鏡」。對於線上試衣,雲之夢主要作為技術提供商為電商平臺提供解決方案;對線下的服裝品牌,雲之夢目前已經推出了兩款智能硬體:一款是配備了2K解析度大屏幕和一個深度攝像機的智能試衣鏡,它可以快速感知創建人體的模型,之後就可以試穿其中存儲的衣服數據。

另一款是有更高技術門檻的3D人體測量建模系統,它的第一代機型是用多個測量數據的Kinect攝像頭,分別分布於被測量人體的前方和後方,可以在3-5秒之內建立基於點雲關係的三維人體模型。

雷鋒網新智造分別試用了兩款產品發現,試衣鏡創建的人體模型並不精確,在人臉和身體的連接處還有一點拼接痕跡,但還是能夠基本體驗換裝後的服裝效果,雲之夢表示,在新一代產品中,已經解決了這個問題;而3D人體測量建模系統創建的人體模型則真實很多,而且是真正的可以拖拽、轉動的三維模型,不過,由於是在開放環境下,複雜的光線等因素會造成在創建基於點雲的三維模型時,一些點「飛出」人體,這就是噪點,表現在人體模型上即一些地方會產生「縫隙」。

雲之夢希望快速創建精確的人體三維模型,所以現在他們還開發了封閉環境下的3D人體測量建模系統,它的外觀是一個太空艙的形狀,而在封閉狀態下,可以最大程度地建立準確的三維模型。

這個封閉的系統也將被放置在線下店中,目前已經有很多家服裝企業表達了購買意願,其中意願最強烈的是做服裝定製的企業。傳統的服裝定製,非常依賴量體師,而後者的培養、薪資都要耗費高昂的時間和金錢成本,精確的3D人體測量建模系統,將大大減少量體師的工作,也為企業降低成本。

應用場景延伸:虛擬換髮型、直播背景實時替換、智能安防

採訪中,雷鋒網(公眾號:雷鋒網)新智造還和雲之夢的產品總監強勝軒進行了交流,他也展示了雲之夢的一款新產品——夠咖,一款基於人像與背景識別分割技術實現的視頻製作應用,它可以幫助視頻主播在直播時實現實時的背景切換。

這個產品可以將人從靜態甚至動態的背景中精準識別並進行完美實時的視頻分割,呈現出的分割結果非常穩定,邊緣也很清晰,夠咖可以讓主播瞬間置身於人潮湧動的艾菲爾鐵塔下,抑或是專業的新聞主播間。

在對人體三維建模研究的過程中,雲之夢也積累了人臉識別、人體測量、人像分割、三維重建、視覺跟蹤理解等核心技術,除了試衣,這些技術還可以應用在多個領域,夠咖就是一個實例,目前,它已經和一家知名的直播平臺達成了合作。

董波告訴雷鋒網新智造,雲之夢正在和一家全國連鎖的美發集團合作,基於人臉識別、人體測量等技術,開發虛擬3D換發應用,直接落地美髮店中。在顧客做頭髮前,店員可以用iPad向顧客展示不同髮型的效果,甚至,顧客還可以看自己試穿不同衣服的效果並直接下單購買,美髮店也能獲得相應的提成。

另外,因為有對三維人體的感知與數據積累,如果應用於智能安防,雲之夢的技術也能獲得不一樣的效果,比如,它可以更多維的辨識觀察對象,感知到潛在危險人員的體形和步態特徵等。

回想起自己的創業歷程,並不懂技術的董波形容自己是「無知者無畏」,現在,雲之夢已經獲得了千萬級別的Pre-A輪融資,公司也已經發展到100多人,其中技術團隊佔了7成。而對於這樣一家公司,技術上的投入可能還要在很長一段時間佔比較大的比例,對於一個創業公司來說,這也是很高的要求。


雷鋒網原創文章,未經授權禁止轉載。詳情見轉載須知。

相關焦點

  • 用虛擬試衣積累亞洲最大女性身材資料庫後,好買衣想用AI做每個人的...
    成立以來,好買衣先後獲得了來自聯想之星和治平資本的天使輪和A輪融資,並在2015年獲得了寬帶資本領投的1500萬美元B輪融資。日前,雷鋒網新智造採訪了柴金祥,了解了好買衣不一樣的虛擬試衣路線。用大數據的方法解決虛擬試衣的問題柴金祥的主要研究領域是人體動畫和動作捕捉,前者研究遊戲、電影中和人相關的三維動畫製作,後一個領域則研究對人體動作的實時捕捉,近年來大熱的用Kinect攝像頭捕捉人體姿勢,就是他的方向之一。
  • 3D 虛擬試衣時代已經來了,你試了嗎?
    重新開張的商店大多是非接觸式的,這意味著,試衣間將被關閉、人流量受到限制、人與人間要保持安全距離。消費者或許並不再願意扎堆排隊去試衣間了。根據First Insight的最新數據,65%的女性消費者表示在試衣間試穿服裝時感到不安全。因此,購物者們只能猜測衣物的合身程度,而且更傾向於採用線上購物時「先買後試」的習慣。
  • 3Dmax高級建模技巧總結,收藏了!3D建模軟體大全
    7CreatorMultiGen-Paradigm公司開發的Creator是專門創建用於大型3D虛擬仿真的實時三維模型的軟體。其強大之處在於管理3D模型數據的資料庫,使得輸入、結構化、修改、創建原型 和優化模型資料庫非常容易。
  • 成都APP開發:虛擬試衣APP軟體開發,推動傳統服裝產業轉型
    在當今移動網際網路時代下,億合軟體認為開發一款虛擬試衣APP軟體無疑是個雙贏的選擇,也將推動整個傳統服裝產業的轉型發展。因此,根據用戶的切身需求,虛擬試衣APP軟體為其提供虛擬AI試穿服務,將很大程度上優化用戶的試穿體驗。 二、虛擬試衣APP軟體開發,需要開發什麼功能呢?1、商品信息錄入及標籤功能 軟體平臺需要根據商家所上架的服裝款式內容來錄入信息,然後整理為用戶試穿所需要的各類標籤,用戶則根據喜愛的標籤在平臺選擇合適的商品來試穿。
  • 實驗課 | 用sweethome3d 和sketchfab 打造虛擬互動現場
    本次實驗任務是讓大家學習用Sweethome3d這樣的開源軟體在自己的電腦上先進行實驗操作,然後通過查找相應案例,設計出一個虛擬現場場景。主要操作步驟參考以下推文:製圖 | 用Sweethome 3d 畫現場立體圖這裡主要就實驗成果的輸出作進一步的說明。點擊菜單欄上按鈕,可以進入標註模式。1.
  • 麵館:能將你的平面照片DIY成3D形象的軟體 | 獵雲網
    功能介紹試衣間:虛擬衣帽間,可以根據喜好挑選並搭配自己喜歡的髮型、眼鏡、服裝、鞋子。大變臉:可以通過調節五官,讓自己的3D角色更加詼諧。也可隨心所欲惡搞身邊的朋友。人臉是情感表達和身份識別的重要部分。目前人臉建模在APP上的應用還是以娛樂類為主。三維人臉建模是人臉動畫和基於三維人臉的人臉識別算法的基礎性工作,也是關鍵一環。
  • 家樂福:旗下服裝品牌TEX官網上推出虛擬試衣間功能
    9月8日消息,日前,家樂福(需求面積:3000-15000平方米)攜漢威士集團旗下媒體Arena在旗下服裝品牌TEX官網上推出虛擬試衣間功能。據外媒報導,家樂福此舉是為促銷其自有品牌Tex不久前上線的秋冬新款女裝。   該品牌產品包括家居亞麻布製品、嬰幼兒服裝和配飾,以及現代男女成人服裝。
  • 從量體裁衣到自動化物流,三維體積測量加速新商業進化
    除了降低消費者的體驗滿意度,退貨也為商家和平臺帶來了極大的庫存和物流壓力。如何彌補服裝類電商購物「看不見、摸不著、無法試穿」這一天然短板成為消費者、商家和平臺迫切需要解決的問題。相比傳統測量方式「精度差、接觸式測量、雙方標準不統一」等缺陷,三維人體掃描可以實現非接觸式三維人體測量,通過連結電商服裝商家的服裝資料庫,實現服裝定製、3D虛擬試衣等,大大地改善了服裝購物體驗並解決了困擾線上商家退貨率居高不下的痛點。
  • 麵館:能將你的平面照片DIY成3D形象的軟體
    功能介紹試衣間:虛擬衣帽間,可以根據喜好挑選並搭配自己喜歡的髮型、眼鏡、服裝、鞋子。大變臉:可以通過調節五官,讓自己的3D角色更加詼諧。也可隨心所欲惡搞身邊的朋友。POSE秀:在這裡可以讓3D角色進行不同動作的展示,同時可切換不同的背景,使之變得更加生動形象。
  • 3d建模軟體手機版有哪些?這3款好用的手機3d建模軟體你一定要有
    3d建模軟體手機版有哪些?對於一些三維設計師來說,能夠在手機上隨時隨地進行三維建模是一件很方便的事。本期,模型云為您整理了這3款好用的手機3d建模軟體介紹,快來和我們一起看看吧!3款好用的手機3d建模軟體3d建模軟體手機版一:MeshMixerMeshMixer是一款操作簡單的手機3d建模工具,其主要功能包括3D列印改進、製造切片工具、拖放及把原本組合在一起的多個不同的幾何體分成單獨的對象等,且支持PLY二進位格式、3Dconnexion
  • 當程式設計師節遇上奧比中光workshop,看3D視覺技術如何賦能個人消費升級
    三維視覺技術在人體測量方面的應用  活動伊始,任茂棟通過主題為《三維視覺技術在人體測量方面的應用》的技術乾貨分享,為3D視覺上下遊從業者講解了三維視覺技術在人體測量領域的技術要點及應用實踐。通過對現階段常見的主流三維測量方法——結構光的深入解讀和相關產品的介紹,觀眾了解到了目前在工業級測量和消費級測量的主要產品。
  • 英國網站ASOS 引進2D「虛擬試衣」功能
    英國網站ASOS 引進2D「虛擬試衣」功能 2013-05-24 11:43:31 來源:網上輕紡城 近日,英國著名時尚購物網站ASOS宣布針對其網站中超過
  • 3d建模需要繪畫功底嗎?十年經驗設計師告訴你3d建模要不要會美術
    很多零基礎的初學者想要學習建模的時候都會擔心3d建模需要繪畫功底嗎,那麼,在我們平時的3d建模過程中,需不需要使用者擁有太多的美術基礎呢?本期,就由十年經驗設計師來和你一起聊聊3d建模要不要會美術。3d建模需要繪畫功底嗎?
  • Adobe上線AI虛擬試衣,再也不怕變成「買家秀」啦~
    不過不用擔心,近日,Adobe上線一項AI虛擬試衣的黑科技,可以讓你預覽虛擬人體模型上的任何衣物,從此再也不怕變成「買家秀」啦~據venturebeat報導,在過去十年中,讓購物者虛擬地試穿化妝品根據銀行公司Klarna的調查發現,有29%的購物者喜歡在實際購買前先在線瀏覽商品,而49%的消費者則對測量尺寸的解決方案感興趣,這樣他們就可以在購買之前確定某樣商品是否合適。基於這個想法,來自Adobe、印度理工學院和史丹福大學的一組研究人員探索了他們所謂的「基於圖像的虛擬試穿」技術,這項技術名為SieveNet。
  • 服裝裁剪設計基礎,怎樣測量人體尺寸和方法
    測量工具1.軟尺軟尺是最基本常用的測量工具。主要用於測量人體和服裝成品的尺寸,軟尺正面是釐米單位,反面是英寸單位。繪圖用釐米畫淨縫線,裁剪的時候根據衣服各部位需要加縫量(縫量也包括類似褲腳裡面的握邊等等反面的尺寸)2.角度尺測量肩斜線角度,胸坡度等等身體各部位角度的尺子。3.測高器用於測量人體身高,坐姿高等等人體縱向高度的工具。
  • 阿里雲棲大會上的新科技:從拍照虛擬試衣,到專有雲拔電工作
    10月11日,澎湃新聞記者來到此處體驗,現場拍照並輸入身材數據後,數秒內即可智能生成一個1:1的虛擬自己。記者嘗試通過鏡面大屏選擇試穿多種不同風格的服裝,這種鏡像級虛擬試衣效果給人一定的代入感和逼真度。
  • 面向新手的十款免費3D建模軟體
    3D建模需要大量練習,但是隨著時間的流逝,任何人都可以學習。查看2020年面向初學者的10種免費3D建模軟體工具。3D建模是一項並非完全容易掌握的技能。大多數CAD軟體都會為您帶來出色的結果,但是在生成夢dream以求的出色3D模型之前,您必須穿越陡峭的學習曲線。許多專業的CAD程序擠滿了您很可能永遠不會使用或不需要的功能。
  • 沒學歷學3D建模?建模大師幫你解決就業難題
    入手學習建模行業知識。。但是又因為自己的學歷、專業基礎等因素躊躇不前。學歷不高、沒有基礎該怎麼學習3D建模行業知識呢?工欲善其事,必先利其器」,這句話用在建模上一樣通用。事實上,隨著次世代遊戲的發展,遊戲美術製作也迎來了全新的製作理念,像ZBrush、Mudbox等軟體就解放了我們的雙手和大腦,讓我們可以不用再依靠滑鼠和參數來建模。對於零基礎,入門難這個問題,有顧慮的人很多。但是細細想來,很多行業大佬在入行之初都是從不懂到精通。我們身處一個學習型的時代,學習的機會和渠道很多,掌握了合適的方法,入門對我們來說就是輕鬆愉快的。
  • 奧比中光線上workshop:人體三維數位化在新消費領域的應用思考與實踐
    三維視覺技術在人體測量方面的應用活動伊始,任茂棟通過主題為《三維視覺技術在人體測量方面的應用》的技術乾貨分享,為3D視覺上下遊從業者講解了三維視覺技術在人體測量領域的技術要點及應用實踐。通過對現階段常見的主流三維測量方法——結構光的深入解讀和相關產品的介紹,觀眾了解到了目前在工業級測量和消費級測量的主要產品。
  • 3D建模從入門到精通
    當然也常常會給自己設置很多思想障礙,比如沒有美術基礎、沒學過畫畫、非科班出身....事實上,建模和畫畫真沒什麼關係,建模領域裡有一套自成體系的美術理論,通過系統學習,足夠讓你從小白蛻變為建模高手。當然這些肯定還是需要自己足夠的去實踐去學習去努力的呀。所以,你需要些什麼,就大膽去實踐,去練習就對了,不必有思想負擔。當你自認為,自己這不行、那不行的時候,是有礙於你學習進步的。