無懼手機拍照高挑戰!紫光展銳圖像算法精確穩定,具備廣泛適用性

2020-11-28 中華網

人類進入智慧型手機時代後,攝影方式也發生了巨大變化:用來拍照的不再只是鏡頭和傳感器了,背後還加載著一系列的圖像算法,它可以用更快的速度處理圖像,並獲得更好的拍攝效果。

好作品只能依賴專業攝影師的時代過去了,圖像算法引入到手機拍照應用後,讓人人拍出好照片成為可能。

紫光展銳擁有自主研發的圖像算法團隊,而且這些算法已普遍應用在展銳的晶片平臺裡。目前,展銳的圖像算法團隊已經超過了200人,分布在美國、印度、中國臺灣、上海和北京等多個國家和地區。

更好的手機拍照效果需要圖像算法的加持,為了讓大家有更好的了解,接下來的系列,我們準備了幾篇科普、視頻和圖說,一起來看看吧~~~

這事得從人類對色彩的感知能力說起…

人類對色彩的感知能力是漫長進化過程中產生的一項重要能力,它使得我們眼中的世界五彩斑斕。顏色是怎麼呈現出來的呢?它是光線通過眼睛成像到視網膜上,由視網膜上的視細胞感知光信號的強弱,視覺神經對信號的傳播,再由大腦處理所產生的視覺感受。顏色的產生極其複雜,人類所獲得的色彩感受不但取決於光的物理特性,還受心理等因素影響。

首先,我們先來了解一下顏色的物理特性。肉眼所見到的光線(一般波長範圍是380-780nm,見圖1),是電磁波譜中人眼可以感知到的部分,不同波長的可見光表現為不同的顏色,對色彩的辨別是肉眼受到可見的電磁波輻射能刺激後引發的視覺神經感覺。

圖1:可見光波長及其對應的顏色

人眼中對光敏感的細胞分為兩類:視杆細胞和視錐細胞。其中,視杆細胞對弱光線最敏感,光譜響應範圍覆蓋整個可見光區域,在500nm附近達到相應的峰值,但無法區分不同的波段的光線,因此無法產生色覺。在非常低的光照水平下,這樣的視覺叫做暗視覺,暗視覺僅視杆細胞在工作。所以在黑暗的夜晚,人們能看到物體,卻分辨不出物體的顏色。

在高光照水平下,主要工作的是視錐細胞,有色覺,這樣的視覺叫明視覺。視錐細胞分為三類:感紅細胞(L) 、感綠細胞(M)和感藍細胞(S)。對同一波長的光線,不同的視錐細胞有不同的響應能力(見圖2),因此視錐細胞具有顏色的辨別能力。

圖2:三種視錐細胞對光的響應能力

光源發射某一光譜分布的電磁波,經過物體的反射或者透射進入人眼,再通過視錐細胞對光線的探測,這整個過程涵蓋了顏色的物理屬性。顏色同時受到人們的心理、現實經驗等因素的影響,某個場景的光在視細胞產生的信號並不等於人們對這個場景的感受。例如,一張白紙不管在紅色還是綠色燈光下,人眼看起來都會覺得這是一張白紙,這來源於大腦的經驗處理,這種現象叫做顏色恆常性。

可以說,你看到的景色都是經過大腦處理加工過的,眼見並不一定為實哦~

圖像算法最大的用途是可以修復照片,使拍攝到的照片獲得真實的色彩效果,或者滿足用戶的某些色彩偏好。

【自動白平衡】

在展銳的ISP(Image Signal Processing)系統裡,主要有自動白平衡(AWB)和顏色校正(CCM)模塊來處理色彩。

先看自動白平衡,ISP系統需要根據圖像的統計信息,計算出圖像R、B channel的增益,以實現自動白平衡功能,以求在各種複雜場景下均能準確還原物體本來的顏色。因為人類視覺系統具有顏色恆常性的特點,對事物的觀察可以不受光源的影響,但圖像傳感器不具有這個特點,因此在不同光線下拍攝的圖像,會呈現出不同的顏色。比如,在晴朗的天空下拍攝的圖像可能偏藍,而在燭光下拍攝的物體可能偏紅。

自動白平衡功能,就是模擬了人類視覺系統的顏色恆常性特點,來消除光源對圖像成像的不良影響。

圖3 :左邊是自動白平衡功能關閉,右邊是自動白平衡開啟

紫光展銳的自動白平衡算法具有以下特點:

效果穩定性好:所謂效果穩定性,指的是拍照場景發生細微改變時,圖像色彩效果不會出現明顯跳變。

準確度高:展銳的算法在處理絕大部分場景時,都能得到符合預期的結果,尤其是用戶關心的藍天、綠植、人物等等重點場景和混合光源、純色、夜景等難點場景。

適用範圍廣、靈活性好:展銳的算法既可以運行在入門級相機設備上(如30萬像素的手錶項目)上,也可以運行在中高端相機設備上(如3200萬像素以上的手機項目),還可以應用到車載記錄等物聯網領域中。而且,不同產品,展銳的自動白平衡算法可以實現靈活配置,實現算法效果、算法複雜度、內存消耗等多樣化的分級需求。

【顏色校正】

相機實際是在模擬人眼的彩色成像來拍圖,由於相機傳感器的RGB三通道的光譜響應與人眼中視細胞的光譜響應(見圖2)不同,導致其拍攝的圖片與人眼看到的有差別,因此需要進行顏色校正(Color Correction Matrix,CCM)。

顏色校正矩陣一般通過標定得到,利用圖像傳感器拍攝得到的圖像與標準圖像相比較,計算得到校正矩陣(即CCM矩陣)。利用CCM矩陣對圖像的各像素點的進行驗收校正,以獲得最接近於物體真實顏色的圖像。

一般情況下,在顏色校正過程中,都會伴隨有顏色飽和度的調整。顏色飽和度是指色彩的純度,其色彩的純度越高,圖像表現越鮮明;純度越低,表現就越黯淡。

圖4 :左邊是CCM關閉,右邊是CCM開啟

圖5:展銳CCM模塊的色彩還原效果評測

(圖中18個小圓點和小方點越接近,則表示色彩還原性越好)

隨著機器學習等高新技術的發展,以及用戶對手機拍照功能的需求日益苛刻,色彩還原技術也會面臨一些新的機遇和挑戰,例如如何利用AI技術提升色彩還原效果,如何在多攝像頭手機上實現更加一致的色彩還原。這些附加技術將給用戶帶來更好的手機拍照體驗,進而持續提升公司產品的競爭力。

免責聲明:市場有風險,選擇需謹慎!此文僅供參考,不作買賣依據。

責任編輯:kj005

文章投訴熱線:156 0057 2229 投訴郵箱:29132 36@qq.com

相關焦點

  • 紫光展銳圖像算法團隊 為提升拍照體驗保駕護航
    人類進入智慧型手機時代後,攝影方式也發生了巨大變化:用來拍照的不再只是鏡頭和傳感器了,背後還加載著一系列的圖像算法,它可以用更快的速度處理圖像,並獲得更好的拍攝效果。好作品只能依賴專業攝影師的時代過去了,圖像算法引入到手機拍照應用後,讓人人拍出好照片成為可能。
  • 紫光展銳圖像算法團隊,為提升拍照體驗保駕護航
    人類進入智慧型手機時代後,攝影方式也發生了巨大變化:用來拍照的不再只是鏡頭和傳感器了,背後還加載著一系列的圖像算法,它可以用更快的速度處理圖像,並獲得更好的拍攝效果。好作品只能依賴專業攝影師的時代過去了,圖像算法引入到手機拍照應用後,讓人人拍出好照片成為可能。
  • AI技術加持色彩還原,揭秘紫光展銳圖像算法
    人類進入智慧型手機時代後,攝影方式也發生了巨大變化:用來拍照的不再只是鏡頭和傳感器了,背後還加載著一系列的圖像算法,它可以用更快的速度處理圖像,並獲得更好的拍攝效果。好作品只能依賴專業攝影師的時代過去了,圖像算法引入到手機拍照應用後,讓人人拍出好照片成為可能。
  • 紫光展銳發布六款晶片 覆蓋5G、物聯網等領域
    主晶片平臺在數字生態中發揮基礎性作用,作為全球少數全面掌握2G/3G/4G/5G、Wi-Fi、藍牙、電視調頻、衛星通信等全場景通信技術,並具備稀缺的大型SoC集成能力的企業,展銳是數字世界當之無愧的生態承載者。
  • 紫光展銳:網絡切片打通終端環節,5G開啟「自助餐」模式
    在不久前舉行的中國移動全球合作夥伴大會上,中國移動聯合展銳、中興通訊等合作夥伴完成了業界首個5G終端切片目標方案的應用演示,標誌著5G終端已具備切片能力,可以為5G用戶提供個性化、定製化服務。紫光展銳產品規劃總監汪大海表示,5G商用已有一年,5G終端出貨量也接近1億,但是人們並沒有體驗到5G與4G更多的差異。「5G到底能給用戶帶來什麼?5G終端切片目標方案可以回答這個問題。」汪大海說。
  • 紫光展銳斥資13億,打造6nm的國產晶片
    打開APP 紫光展銳斥資13億,打造6nm的國產晶片 網際網路科技黑馬 發表於 2020-11-26 11:41:18   這個企業的名字叫紫光展銳,朋友們應當都沒有傳聞過,固然它的名望沒有華為大,不過紫光展銳在晶片平臺的開展並無掉隊於華為。   這一次紫光展銳更是斥巨資13億,即是為了打造6nm的國產晶片。在此以前,紫光展銳還還推出了虎賁T7520,這讓紫光展銳成為了環球首個公布6nmEUV處分器的企業,不得不說真是給國人臉上增色了。
  • 紫光展銳發布新一代5G SoC T7520 採用6nm EUV工藝
    【TechWeb】2月26日下午,紫光展銳將召開2020年春季線上發布會,會上,紫光展銳推出新一代5G SoC虎賁T7520,在技術工藝、通信能力、AI、視覺能力、續航能力,安全性六大方面具有優勢。
  • 紫光展銳發布旗艦級智能手錶平臺 W517:12nm 製程工藝、超微高集成
    IT之家11月9日消息 2020 年 11 月 7 日–紫光展銳今日正式發布旗艦智能手錶平臺 — W517,IT之家從展銳官方資料獲悉,W517 性能全面升級,由四核處理器組成,採用先進的 12nm 製程工藝,無級變速調節的系統調度技術,從 SOC、數據機、作業系統、存儲四個維度進行全面的功耗優化,整體功耗比同檔競品降低
  • 5G網絡切片是什麼 紫光展銳如何做到全球首例
    5G紫光展銳產品規劃副總裁夏曉菲和紫光展銳產品規劃總監汪大海在「釋放5G潛能 繁榮終端生態」的技術分享會上講述了網絡切片技術以及紫光展銳在網絡切片技術方面取得的成果。紫光展銳產品規劃副總裁夏曉菲相信網絡切片對於很多朋友來說都是一個陌生的詞彙,它是5G應用的熱門技術,能夠更好的利用5G網絡。5G網絡的一個重要特點,就是速度快。
  • 春藤8908A獲德電完全認證 紫光展銳NB-IoT全球布局新突破
    通過了完全認證,意味著德國電信認可春藤8908A晶片平臺已經完全支持GSMA TS.34 Radio Policy Manager特性,進而認可春藤8908A適用於大規模物聯網項目的部署;同時也意味著在德電嚴謹的測試標準下,紫光展銳春藤8908A的產品成熟度提升到了更高的水平,是紫光展銳在全球NB-IoT市場布局進程中實現的又一關鍵突破。
  • 6G 賽道提前布局:紫光展銳發布 6G 白皮書
    11月11日消息 11月10日,紫光展銳在上海國際會議中心召開的 5G 產業創新高峰論壇上,正式發布了《6G:無界,有 AI》白皮書。為了適應場景和需求的多樣性,6G 核心技術也將呈現多元化,白皮書對太赫茲通信、可見光通信、先進調製解碼、星地協同傳輸等 6G 核心技術的主要特點、性能特性、發展挑戰進行了深入分析,並給出了進一步研究的建議。
  • 極光:2020年中國拍照手機發展趨勢分析
    這些廠商已經脫離了供應商提供的模塊化元器件選擇限制,將相機核心技術牢牢掌握在自己手中,能夠自主、獨立的打造一整套手機攝影系統。他們具備完整的軟硬體自研技術,倒推上遊供應商,實現產業鏈定義能力。第一梯隊的手機廠商能夠深度定製更高端、更強悍的相機硬體模組,並通過系統層級的軟體優化算法,優化圖像處理,從而得到優異的拍照效果。
  • 紫光展銳王瀧:5G 和 Wi-Fi 是互補共生,而不是相互取代
    近日,紫光展銳媒體溝通會泛連接專場在深圳舉行,紫光展銳執行副總裁王瀧對紫光展銳在泛連接領域目前的戰略規劃,以及5G和Wi-Fi等熱點領域進行了分析。在5G技術逐漸普及之後,業界產生了「Wi-Fi消亡」言論,原因是因為5G的高速率低時延等特性可以完全取代Wi-Fi。
  • 無死角精確美顏:OPPO Find X 3D結構光技術解析
    這次的Find X不僅繼承了「突破性設計」這一傳統,還把它推向了前所未有的新高度,為消費者提供了一款實力無短板、技術有突破的未來旗艦。儘管Find X中注入了許多新的黑科技,但我相信其中最引人注目的,應該是在相機方面,OPPO首創的雙軌潛望結構內所搭載的O-Face 3D結構光技術。因此,本文就為大家細緻的介紹一下這款技術。
  • 紫光展銳發布《6G:無界,有AI》白皮書:6G將打破傳統信息交互界限
    11月10日,在上海召開的5G產業創新高峰論壇上,紫光展銳正式發布了《6G:無界,有AI》白皮書,其中包括6G應用場景、性能指標、晶片技術需求、網絡框架演進以及候選核心技術。在紫光展銳看來,6G將構建一個 ICDT融合、天地融合、虛實融合的全新生態。在這個生態裡,終端將呈現出泛在化、智能化、融合化等趨勢。  白皮書還對6G終端晶片和器件在帶寬、頻率、功耗、集成度、多模化、智能化等方面提出了技術創新和預研方向的洞察。
  • 加速4G、5G網絡演進 全「芯」展銳出新招
    紫光展銳出新招為了實現有序平穩的網絡升級,保護2G和3G現有用戶的關切和利益,為5G到來鋪平道路,紫光展銳出了「新招」,推出了針對性解決方案——4G功能機SOC平臺虎賁T117。憑藉虎賁T117,紫光展銳不僅是全球首個2G、3G用戶遷移的全方案晶片平臺供應商,更成為助力全球運營商2G、3G轉網4G的最佳合作夥伴。亦如紫光展銳執行副總裁周晨所說,紫光展銳致力於提供創新技術,為客戶帶來最大價值。
  • OnePlus 5和華為P10才是國產手機的拍照雙雄,娛樂圈的智商救不了OPPO
    對於智慧型手機視頻愛好者而言,OnePlus 5提供了4K 2160p / 30fps的捕獲,以及1080p / 60 / 30fps和720p / 30 / 120fps解析度。默認模式在所有條件下都提供1080p / 30fps的精確曝光和白平衡,並且在變化的照明條件下快速變化。其他視頻優勢包括快速準確的自動對焦和有效的圖像穩定系統。」