移動端三維重建APP匯總LiDAR掃描技巧

2021-02-15 三次方AIRX

怎麼學習體系化的AR／VR開發、MR創作、MR產品設計呢？

來三次方哇，三次方提供體系化、結構化的AR／VR課程，這裡不僅有ARVR，還有遊戲開發、AI、CV、大數據等。唯有愛、用戶與學習不可辜負～


哈嘍艾薇巴蒂，我是範特西。首先祝大家新年快樂哇，牛年牛氣沖天，「 🐂 」轉乾坤。新的一年繼續關注和支持我們的三次方AIRX，我們會有發布一系列的課程發布哦，「三次方XR學習季」等你來！！！

相信有很多小夥伴已經嘗試了iPhone 12 Pro上的LiDAR功能了吧，經常有小夥伴來抱怨：我移動端三維重建使用什麼APP啊，這麼多APP我怎麼選啊，另外為什麼我的重建結果很垃圾啊. 根據以上問題，範特西參考了Sketchfab聯合創始人兼執行長的blog中關於一些問題的解答，希望可以幫助到三次方AIRX的朋友們，趕緊開發搞起來吧！

https://albn.medium.com/3d-scanning-with-the-iphone-lidar-8cbd723fc9ab

最近發布的許多3D重建應用程式都利用了這一新功能（LiDAR）。作者已經測試了幾乎所有的程序，下面是一篇關於作者常用的一些三維重建應用程式的匯總以及一些iPhone雷射雷達掃描的技巧。下面是我的6個掃描應用程式，它們都可以直接導出到Sketchfab:

來源：https://albn.medium.com/3d-scanning-with-the-iphone-lidar-8cbd723fc9ab

3D Scanner 是一個簡單而強大的工具，可在數分鐘內創建對象和空間的3D模型。該應用通過行動裝置在3D環境中捕捉任何東西。使用你的行動裝置將任何對象或空間轉換為3D模型，並且可以輕鬆地保存和共享。

它提供了很多功能選項。例如，你可以輕鬆地在應用程式中進行抽取或修剪，甚至可以使用球體修剪。作者發現該應用特別重建適合較小的事物，例如這張鈔票。確保使用高清模式。

Polycam速度非常快，並且在紋理方面做得很好。你可以在高清模式下進行處理，並進行即時測量。作者喜歡用它來掃描房間、壁畫或街頭藝術品。

APP官網介紹：https://polycam.ai/

Record3D可以讓你捕捉體積視頻，也被稱為4D內容，即每幀視頻的3D掃描。請記住，這種方法輸出非常大的文件，所以你需要將捕獲文件保存在幾秒鐘內，以便能夠將其上傳到Sketchfab。

APP官網介紹：https://record3d.app/

Scaniverse快速易用，並且生成很棒的紋理，在閉合方面也做得很好。確保在ultra模式下處理你的捕獲內容。作者喜歡用它來掃描汽車之類的東西。是目前最棒的LiDAR掃描之一。

APP官網介紹：https://scaniverse.com/

SiteScape可以快速處理點雲並且結果也很準確。你可以調整點密度和大小。作喜歡用它來處理複雜的場景或結構。汽車掃描重建效果也很贊

APP官網介紹：https://www.sitescape.ai/

Everypoint適合大型點雲，例如整個地鐵的三維重建。該APP聲明即將發布結合了雷射雷達和攝影測量的應用，迫不及待地想嘗試一下。

APP官網介紹：https://everypoint.io/

首先知道要掃描什麼。人們對iPhone雷射雷達掃描經常感到失望，他們經常掃描無法獲得效果很好的物體。要知道的最重要的事情之一是它不適用於較小的事物和對象。通常鞋子太小。也不適用於發亮/反光的東西。

避免重新掃描你已經覆蓋的區域，這可能會導致對齊問題。

掃描周圍的細小物體（如雕像，椅子或牆壁）通常效果不佳。

確保正確覆蓋要掃描的每個部分，以免出現洞。小Tip：使用一種噴塗手勢，有點像是我正在噴塗油漆。

穩步慢慢地前進。

3Dscannerapp，Polycam和Scaniverse提供應用內修改與裁剪。

Sketchfab提供了許多功能，可幫助將不良掃描變為正常掃描。我喜歡添加一個自動烘焙的AO地面陰影（第二個編輯器選項卡），然後發布過程效果，例如清晰度，景深，飽和度……

將房間的面設置為單面，因此你可以從外部看到內部（第3個編輯器選項卡中的最後一個選項）。

在Sketchfab中添加3D注釋是個好習慣

文章版權歸三次方所有，未經同意禁止轉載

三次方是一家專注於培養數位化人才的在線教育平臺，幫助Z時代大學生和0-5年職場人獲得混合現實、遊戲開發、人工智慧、大數據等多項專業能力。通過系統標準化、個性化的課程內容和RAC學習模型（認知➡能力➡實踐），幫助年輕人獲得適應未來社會的新技術能力。

三次方致力於培養21世紀5G推動下新十年裡的新生代青年，幫助年輕人獲得適應未來社會的新技術能力。三次方幫你拿到5G新時代快人一步的船票，來三次方，做Z時代新技術青年～

備註：」暱稱+學校/公司+研究方向「

相關焦點

  • 一分鐘詳解三維重建學習路線
    1、什麼是三維重建三維重建 ，英文名稱是3D Reconstruction。三維重建是將三維的物體在虛擬世界中重建出來，通俗點說，我們做的就是照相機的逆操作（照相機是將現實中的物體呈現在二維圖片中，而三維重建是將二維圖片中的信息在三維虛擬空間中顯現）。
  • 計算專題丨[轉] 移動端高質量在線三維掃描儀Mobile3DScanner (IEEE TVCG)
    在移動平臺上基於RGBD相機實現實時高質量的物體三維掃描重建是增強現實應用中的關鍵技術之一。
  • ISMAR 2020 Best Paper | 商湯提出手機端實時單目三維重建系統
    商湯研究院和浙江大學 CAD&CG 國家重點實驗室合作研發了一個手機端實時單目三維重建系統 Mobile3DRecon。與現有的基於 RGBD 的在線三維重建或離線生成表面網格的系統不同，該系統結合前端位姿跟蹤結果，允許用戶使用單目攝像頭在線重建場景表面網格。在深度估計方面，提出結合多視圖半全局匹配算法和深度神經網絡優化後處理過程魯棒地估計場景深度。
  • 商湯提出手機端實時單目三維重建系統,實現逼真AR效果和交互
    商湯研究院和浙江大學 CAD&CG 國家重點實驗室合作研發了一個手機端實時單目三維重建系統 Mobile3DRecon。與現有的基於 RGBD 的在線三維重建或離線生成表面網格的系統不同，該系統結合前端位姿跟蹤結果，允許用戶使用單目攝像頭在線重建場景表面網格。在深度估計方面，提出結合多視圖半全局匹配算法和深度神經網絡優化後處理過程魯棒地估計場景深度。
  • 結構光三維重建原理
    ,其特點是能夠精確快速地實現被測物體三維信息計算。對比雙目立體視覺重建方法，結構光也是利用兩個位姿的光學元件通過三角測量實現三維重建，但由於主 動投射結構光圖案至被測物體，使得像素點之間的匹配更加容易和準確。本文所 述結構光方法均選擇多頻外差原理實現絕對相位求解，相較於其它結構光方法， 該方法測量的精度和抗幹擾能力更高。
  • 為什麼肋骨骨折CT掃描一定要做三維成像
    VR是通過容積數據時所有像素總合的圖像顯示，利用了所有掃描信息，是一種較高形式的重建方式，並能通過任意手工選擇層面，任意方位進行切割和旋轉，較為滿意地顯示出骨折線、移位，是一種對骨折後處理較常用的CT後處理技術。VR三維重建圖像提供近似解剖結構的圖像，定位準確，空間立體感強。
  • 一個簡單的在線三維重建服務框架
    三維重建計算量很大，對於大規模的場景計算需要很高的計算資源，往往也只能通過桌面端操作上傳圖像。想要快速基於拍攝的圖片獲得三維模型，又不想回到室內操作，那麼就需要上雲，就需要一套自動化程度相對較高、圖像採集操作簡單、具備模型可視化的方法，但是如果要部署一個計算性能很高的雲伺服器，成本又實在太高了，買不起...。
  • 三維重建技術深度解析
    基於不同類型區分每一套算法，以此把整合所有三維重建流水線功能，保證每套算法的緊湊性、可重用性與可執行性。其掃描資料以點的形式進行記錄，這些點既可以是三維坐標，也可以是顏色或者光照強度等信息。通常所使用的點雲數據一般包括點坐標精度、空間解析度和表面法向量等內容。點雲一般以PCD格式進行保存，這種格式的點雲數據可操作性較強，同時能夠提高點雲配準融合的速度。本文研究的點雲數據為非結構化的散亂點雲，屬於三維重建特有的點雲特點。
  • 計算機視覺方向簡介 | 深度學習視覺三維重建
    真正意義上的計算機視覺要超越識別，感知三維環境。我們活在三維空間裡，要做到交互和感知，就必須將世界恢復到三維。所以，在識別的基礎上，計算機視覺下一步必須走向三維重建。本文筆者將帶大家初步了解三維重建的相關內容以及算法。在計算機視覺中, 三維重建是指根據單視圖或者多視圖的圖像重建三維信息的過程. 由於單視頻的信息不完全,因此三維重建需要利用經驗知識.
  • ACM TOG:基於多臺RGBD相機的三維全景圖及場景重建
    三維場景重建技術是獲取三維場景幾何信息的主要技術之一，是實現對三維場景理解和分析的基礎技術，一直以來是計算機圖形學、計算機視覺和智慧機器人等領域的基本研究課題。三維場景重建技術主要分兩類：自由式掃描三維重建和全景式掃描三維重建。自由式掃描三維重建對場景的掃描過程不做限定，通過準確的相機位姿估計或者視覺SLAM技術，實現三維場景的重建。
  • 三維視覺、SLAM方向國內外頂尖實驗室匯總
    在此，我們為大家匯總了全球頂級的三維視覺、SLAM方向的研究機構，並對他們主要的研究成果做了簡單匯總，從這些匯總中你可以：歡迎轉發給更多的朋友~歐洲英國倫敦大學帝國理工學院 Dyson 機器人實驗室http://www.imperial.ac.uk/dyson-robotics-lab簡介：倫敦帝國理工學院戴森機器人實驗室成立於2014年，由Andrew
  • SLAMer ,深度學習,軍用專用無線發展史,蘋果LiDAR,華為LiDAR,銅線/光纖,驍龍480 5G,陸奇講話,
    繼今年3月搭載LiDAR（雷射雷達掃描）的iPad Pro問世後，蘋果宣布新品iPhone12 Pro/Pro Max搭載LiDAR。雖然一直以來AR眼鏡被視為AR未來的終極形態，蘋果的Apple Glass呼聲也很高，但蘋果的AR生態起步則是基於已有的移動端硬體生態，從軟體與軟體開發工具ARkit開始。
  • 基於移動三維雷射掃描的盾構隧道斷面提取與應用
    傳統站式三維雷射掃描儀雖然也能獲取大量隧道結構點雲數據，但站式掃描儀存在需要搬站，後期處理需要拼接，高比例重疊產生大量冗餘數據的不足不能更好地適應地鐵隧道的測量需求。  近年，移動三維掃描技術的測量速度和測量精度都有了大幅的提高，該技術恰巧能解決目前隧道斷面監測中碰到的測量天窗時間短及測量範圍不足的問題。
  • 上帝視角任意切換:三維重建和圖像渲染是怎麼結合的?
    但無論如何，這個系統在我看來堪稱是三維重建和圖像渲染、瀏覽技術的經典作品。因此這一篇文章就從它講起。PhotoSynth的一大特色，是可以允許人們用上帝視角來觀察某個特定的景點，並且可以任意切換視角。Photo Toursim的初衷是希望能夠利用網際網路上存在的成百上千的圖片進行場景的三維重建，並加以先進的圖像渲染和瀏覽技術，形成一個高級的圖像瀏覽系統。
  • ACM MM 2020 | Neural3D: 基於神經渲染的輕量級人體肖像掃描重建
    Neural3D: Light-weight Neural Portrait Scanning via Context-aware Correspondence Learning隨著算法和硬體的提升，移動端的人體掃描重建是最近幾年的一個熱門落地方向
  • ImagePy 三維分析及可視化解決方案
    ImagePy 三維展示概覽這裡展示幾個三維視圖，但是需要提醒讀者，三維可視化不等於三維分析，可視化有助於理解，並且可以直觀驗證算法效果，但初學者不要沉迷與三維特效，應注重分析問題的思路，數據處理技巧，請在三維重建之前關閉之前的三維窗口，否則結果會疊加。
  • 最強戰隊 | 三維視覺、SLAM方向全球頂尖實驗室匯總
    在此，我們為大家匯總了全球頂級的三維視覺、SLAM方向的研究機構，並對他們主要的研究成果做了簡單匯總，從這些匯總中你可以：歡迎轉發給更多的朋友~：可以生成具有相關語義標記的高效且準確的密集三維重建地圖。
  • BundleFusion 三維重建-編譯與使用
    「 BundleFusion算法可以實現三維的實時重建，本文主要是編譯和運行。
  • 【泡泡點雲時空】R-MVSNet:高解析度多視圖三維重建網絡
    深度學習已經被證明在多視圖三維重建(MVS)中可以取得很好的效果，但是，現有的基於深度學習的三維重建方法最大的限制是尺度問題，大量的內存需求導致這些方法無法被應用在大尺度場景中。在本文中，我們提出了一種基於循環神經網絡的方法R-MVSNet，以適應各種尺度的環境。
  • 【工具】實景、實物三維重建雲平臺---Altizure
    Altizure是深圳珠科創新技術有限公司開發的實景、實物三維重建雲平臺。