夜梟,是夜晚視力最好的動物。
在小米,有一群工程師讓小米相機像夜梟的眼睛一樣,能把極度黑暗場景下的事物拍得清晰。這背後的AI技術是如何實現的?
問題拋向了百萬美金技術大獎二等獎得主:夜梟——AI極暗光視覺項目團隊。今天,他們將為大家帶來小米相機「夜梟之眼 」背後的故事。
小米相機的領先,離不開工程師們在極端拍照場景下的不斷死磕。
極暗光場景拍照既是用戶關注的重點,也是行業的技術難點。在環境照度0.1lux以下的極暗光場景,入射光不足導致拍攝的照片存在亮度低、色彩失真、噪聲嚴重的問題,連單眼相機都很難拍出很好的效果。
對此,小米相機算法AI組開展了夜梟—AI極暗光視覺項目。
從一片黑暗
到發現黑暗中的每一處細節
在短短半年的時間內,突破了暗光視覺極限,解決了手機的極暗光應用難題。在極暗光場景下的拍照效果已經達到了全球頂級水平。
夜梟算法使用深度學習技術來提升極暗光場景畫質,為了能夠更加了解噪聲的分布和形態,小米自研了極暗光場景的噪聲標定系統和數據採集系統,分解噪聲的來源和對成像質量的影響,獲得豐富的數據用於訓練。
依託於小米手機強大的AI算力,夜梟算法使用AI測光實現環境自適應的亮度提升和色彩還原。
在去噪方面,夜梟對多幀raw圖進行subpixel-level的對齊,以及feature-level的融合,既有效去掉了噪聲,又能保留豐富的細節。
夜梟的這顆「 黑暗之眼 」,讓我們看到了黑夜中隱藏的無限可能。
小米集團副總裁、集團技術委員會主席崔寶秋博士這樣評價他們:
「
夜梟這個項目的工程師們非常年輕,創新能力非常強。作為一名攝影愛好者,我深知,小米在不斷刷新DXOMARK全球第一的背後,離不開工程師們在影像技術領域的大膽探索,離不開他們在極端拍照場景下的不斷死磕,把一個個不可能變成了可能。
」
2020年小米百萬美金技術大獎的評選中,湧現出了一大批領先的硬核技術。未來,小米將持續探索先進技術,讓全球每個人都能享受科技帶來的美好生活。