隨著移動網際網路的發展，視頻已經日漸成為了用戶之間交流主要內容形式。同時拍攝各類長短視頻也已經成為了用戶使用手機的主要需求之一，並且普通用戶常常將短視頻用於社交用途，因此在用戶拍攝的視頻內容當中以人為主體的人像視頻佔比非常高。
針對這一流行趨勢，在近日舉辦的OPPO「未來科技大會2020」上，OPPO公布了最新研發的「OPPO FDF全維人像視頻技術系統」，該系統由感知人像和畫質增強兩大引擎組成。據OPPO官方介紹，該系統可以有效提升人像視頻的拍攝體驗。
OPPO FDF全維人像視頻技術系統
OPPO FDF全維人像視頻技術系統作為一種新生事物，不由得令人好奇，其能在哪些方面提升人像視頻的拍攝體驗？OPPO又為這一技術系統配備了哪些新技術；下面便為大家詳細解析一下。
AI助力人像視頻拍攝
在人像視頻拍攝中，對於拍攝算法而言首要的自然是要精準的識別人臉。因為在成功識別並捕捉到人臉之後，算法才能夠進行相應的優化，而要做到快速精準的人臉識別，需要用到感知人像引擎中的AI人臉檢測技術。
AI人臉檢測
OPPPO的AI人臉檢測技術採用了深度可分離卷積模型，在卷積結構中，每個卷積核只負責卷積單一通道，可以以更少的參數量完整特徵圖譜的生成。該模型相比其它方案，體量更小、運算耗時更短，可以更快的做到人臉識別。
為了加強AI人臉檢測的檢測效果，OPPO還在模型中引入了FPN結構，對金字塔中的每一層尺寸不同的特徵圖進行融合，可以實現準確率更高的檢測效果。由此，OPPO FDF全維人像視頻技術系統的AI人臉檢測技術可以做到高達99.78%的AI人臉檢測準確率，移動平臺單幀檢測耗時低至25ms。
在快速精準的進行了人臉識別之後，便需要對人臉進行分析，進一步的優化提供數據基礎。在這一環境下OPPO採用了感知人像引擎的AI人臉關鍵點檢測技術。
AI人臉關鍵點檢測
該技術能夠檢測296個人臉關鍵點數量，同時通過對AI人臉關鍵點檢測模型的LOSS函數進行優化，並在算法中加入關鍵點是否可見判斷、人臉角度判斷等輔助信息，來為之後的AI算法提供數據模型基礎。
在掌握了人臉的數據模型之後，OPPO FDF全維人像視頻技術系統的感知人像引擎便可以對人像的拍攝質量進行優化。其不但可以通過AI算法實現人像圖像清晰度的提升，還能對膚質進行優化、並實現人臉畸變矯正等功能。
感知人像引擎
用戶在暗光、長焦拍攝、拍攝時手抖等情況下往往會拍攝到畫面模糊、不清晰的視頻畫面。因為在生活中值得記錄的瞬間往往是不能二次拍攝的，所以如何拯救這些模糊的視頻畫面變得特別重要。
AI超清人像
感知人像引擎的AI超清人像功能，可以對模糊的畫面進行處理，得到更清晰、細節表現更細膩的畫面。該功能的AI算法神經網絡模型中加入了Portrait SR Model（超分模型），並可以在PostProcessing（後處理模型）中進一步優化畫面噪點表現。
AI超清人像
國內用戶對於人像視頻中的美顏算法是十分關注的，為此OPPO在FDF全維人像視頻技術系統中引入了OFL膚質優化算法，可以實現AI膚色檢測和AI祛瑕疵功能。
OFL膚質優化算法
在AI膚色檢測功能的神經網絡模型中，OPPO改進了網絡架構和LOSS函數，使模型收斂速度更快。再經過海量大數據進行驗證和測試，最終實現96.5%的皮膚區域檢測準確率和97.4%的臉部皮膚精度。
AI膚色檢測
同時，還實現了針對臉部、脖子、手部的大範圍皮膚區域檢測。進而避免畫面出現臉、脖子和手皮膚表現不一致的問題。
AI膚色檢測
AI祛瑕疵功能可以精準區分用戶臉部的「瑕疵」是天生的特徵還是後天的瑕疵，比如斑、痘痘、眼袋、法令紋等影響用戶表現的瑕疵會經過AI算法處理消除。其還具備分階採樣能力，確保AI祛瑕疵神經網絡模型適用更廣泛的用戶場景。
AI祛瑕疵
AI祛瑕疵
在用戶使用前置廣角鏡頭進行人像視頻拍攝時，往往會遇到因超廣角鏡頭光學特效導致的畫面畸變問題。而以往的算法在對人臉畸變進行矯正的過程中，通常會出現「人臉畸變矯正的同時，背景畫面也變形了」。OPPO人臉畸變矯正算法則可以實現人臉畸變矯正，且保持背景畫面自然、不變形。
人臉畸變矯正算法
據OPPO官方資料介紹，感知人像引擎在獲取到傳感器上的透視投影圖像後，再對畫面進行一次球面投影，兩次投影分別得到真實形態的背景畫面和人物畫面，而後對兩個畫面進行疊加生成矯正後的新畫面，實現人物和背景的自然矯正，最終實現人美，景也美。
多技術融合 視頻畫質再升級
OPPO FDF全維人像視頻技術系統除了能夠通過AI算法來改善用戶在拍攝人像視頻時的諸多特別之外，該技術系統的畫質增強引擎還能夠有效提升人像視頻的畫質。
畫質增強引擎
視頻拍攝時的畫面抖動一直以來都是視頻作品創作的難題，對此畫質增強引擎引入了新一代超級防抖算法。該算法加入了場景檢測功能，可以通過檢測手機陀螺儀、加速度計和Sensor的數據，對運動軌跡、姿態和曝光進行判斷，建立不同拍攝場景下的抖動模型，並針對性地匹配防抖策略。
新一代超級防抖算法
OPPO新一代超級防抖算法應用到移動延時攝影中，還額外增加了運動趨勢判斷，使被抽取出來的多幀畫面過渡更平滑，並且實現更長時間跨度的防抖。
移動延時攝影
畫質增強引擎中還集成了超級夜景和視頻HDR 融合算法，可以根據環境自適應調節各模塊處理效果，實現畫面亮度表現更均勻、過渡更自然、噪點更少和色彩表現更真實的效果。同時其還打造了在3-HDR基礎之上發展而來的DOL-HDR（準同時多幀動態融合）方案，DOL-HDR算法中多幀的長短曝光幾乎同時進行，可以大幅縮減前後幀的間隔時間，有效地改善拍攝時出現「鬼影」的問題。
超級夜景和視頻HDR
超級夜景和視頻HDR
OPPO FDF全維人像視頻技術系統的畫質增強引擎所集成的各項技術能夠有效提升人像視頻最後的成片質量，並且OPPO會陸續把HDR、夜景、超級防抖等方面的技術開放給抖音和快手等第三方平臺使用，未來在使用第三方視頻APP進行拍攝時也同樣可以使用OPPO先進的視頻畫質增強技術。
共享技術接口
OPPO人像視頻技術領先的背後
通過上文大家已經了解到了OPPO FDF全維人像視頻技術系統的領先優勢，那麼OPPO又是如何做到這一點的呢？
首先這自然離不開OPPO在影像多年來的技術積累，從2012年開始，OPPO便在全球範圍陸續布局人像拍攝相關專利，包括中國、美國、德國、法國、英國、印度以及日韓等25個國家地區。截至目前，專利申請總數量700+件、500+專利族，其中已授權專利200+，發明專利佔比約為80%，涉及人像美顏、虛化、防抖、夜景、AI人像等多方位技術。
專利布局
並且OPPO同時也十分重視影像團隊的建設，目前影像團隊在全球擁有五大影像團隊，包括深圳團隊、上海團隊、成都團隊、日研所（橫濱）團隊和美研所（矽谷）團隊。
OPPO魔鏡專項
在進行技術研發的同時，OPPO也沒有忽視用戶的意見。OPPO通過OPPO魔鏡專項，對對用戶、導購、人像攝影師、明星修圖師、資深肌膚專家進行訪談、跟拍，挖掘用戶在人像拍攝時在意的因素，進而總結出「好的人像視頻」新定義。
「好的人像視頻」新定義
總結
由於普通用戶很難像專業的攝影師一樣使用手動對焦、輔助打光、大光圈虛化等專業手法去拍攝人像視頻，因此對於用戶而言如果有一套表現優秀的人像視頻技術進行系統級優化，便可幫助用戶提升人像視頻的拍攝質量。而這正是OPPO想要通過OPPO FDF全維人像視頻技術系統做到的，也對行業進入人像視頻專業化時代起到了引領作用。
據OPPO方面透露，首款搭載OPPO FDF全維人像視頻技術新品將於12月面世，屆時我們便可以實際體驗到FDF全維人像視頻技術系統所帶來的視頻拍攝體驗升級。
本文屬於原創文章，如若轉載，請註明來源：讓視頻拍攝更智能 OPPO FDF全維人像視頻系統解析http://mobile.zol.com.cn/757/7571054.html
http://mobile.zol.com.cn/757/7571054.html mobile.zol.com.cn true http://mobile.zol.com.cn/757/7571054.html report 6016 隨著移動網際網路的發展，視頻已經日漸成為了用戶之間交流主要內容形式。同時拍攝各類長短視頻也已經成為了用戶使用手機的主要需求之一，並且普通用戶常常將短視頻用於社交用途，因此在用戶拍攝的視頻內容當中以人為主體的人像視頻佔比非常高。針對這一流行趨勢，在近日舉...