世界最快相機誕生!每秒捕捉70萬億幀

2021-02-25 中國光學


推廣位(非商務)

封面圖來源:加州理工學院

近日,美國加州理工學院汪立宏團隊採用壓縮超快光譜攝影技術(compressed ultrafastspectral photography, CUSP), 打破了該記錄,實現每秒70萬億幀的拍攝技術。

這個技術有多牛,舉個例子您就能明白:光速約為3000億毫米/秒。若以70萬億幀/秒的速度除以光速,為233.3幀。換句話說,這臺攝像機在光波移動1毫米的時間內可以捕獲約230幀畫面。

並且,汪立宏團隊利用該技術首次實現了螢光壽命實時成像(single-shot spectrallyresolved fluorescence lifetime imaging microscopy,SR-FLIM)

相機的成像速度從根本上限制了人類識別物理世界的能力。隨著幾十年的發展,基於矽的成像傳感器,例如CCD和CMOS,已經可以提供高達每秒百萬幀成像速度。

但是,它們在捕獲各種極其快速的事件方面卻不盡人意,例如超短光傳播,分子的輻射衰減,衝擊波傳播,核聚變,光子在擴散介質中的傳輸等。要觀察這些事件,幀速率必須超過每秒十億幀甚至是萬億幀

為了解決相機幀速率不足的這一問題,目前主要有兩種解決思路:


1)對同一過程進行多次拍攝,然後間接描述事件的發展過程。但是這種方案只能解決發生過程保持高度一致的事件,無法實時記錄事件。

2)不斷提升相機的幀頻率,直至達到每秒十億幀甚至是萬億幀的速率。2011年麻省理工學院首次實現了每秒1萬億幀的拍攝技術。然後,隆德大學的FRAME相機又於2017年實現了每秒5萬億幀。緊接著,加拿大魁北克大學發明的T-CUP技術,又於2018年將該記錄刷新至每秒10萬億幀

針對第二種思路,超高速壓縮攝影(CUP)是最有希望突破每秒10萬億幀速率的技術。CUP是基於壓縮感知理論和條紋相機技術,不幸的是,CUP的幀速率取決於條紋相機偏轉電子的能力,並且其序列深度(每次捕獲的幀數,300幀)受到傳感器像素數量的嚴格限制。

為了克服這一問題,汪立宏團隊巧妙將CUP技術與脈衝分解技術相結合,成功研發了一種可以對超快發生的事件進行實時成像的技術—壓縮超快光譜攝影技術(CUSP)(圖1)。

CUSP技術利用飛秒級(10-15秒)的雷射作為光源。該光源經過光學器件之後被分解為更短的閃光,從而製備了到目前為止最大序列深度的相機,幀速率可達70萬億幀/秒。

圖1.CUSP系統示意圖。a)通過一對分束器和一個玻璃棒將單個飛秒脈衝轉換為時間線性脈衝序列,相鄰子脈衝之間的距離為tsp(可以根據實驗進行調整)。b)光譜色散方案的詳細圖示(黑色虛線框)。c) 原始CUSP圖像的組成,其中包括水平方向上的光柵頻譜色散和垂直方向上的條紋相機的時間剪切。BS,分束器;DMD,數字微反射鏡;G,衍射光柵;L,透鏡;M,反射鏡。

利用一束光通過「Caltech」字樣,T-CUP相機如圖2(左)所示,新型CUSP相機如圖2(右)所示:

圖2.CUSP技術和T-CUP技術成像過程對比。

在充分驗證了CUSP技術的可靠性之後,該團隊利用該技術首次實現了螢光壽命實時成像(圖3)。

圖3.SR-FLIM設計思路及其檢測結果。a) 基於CUSP技術的SR-FLIM示意圖;b)532nm雷射激發樣品產生的螢光隨著時間的變化關係;c)不同濃度樣品產生的螢光的平均壽命。

這項技術可以為基礎物理學,下一代半導體小型化和生命科學等領域開闢新的研究途徑,例如超短光傳播,波傳播,核聚變,雲和生物組織中的光子傳輸以及生物分子的螢光衰變。

另外,該脈衝分解提升序列深度的思路也為發展更快的超快拍攝技術的提供了新的方向。

文章信息:

相關成果以「 Single-shot ultrafast imaging attaining 70 trillion frames per second 」為題發表在 Nature communication 期刊。

Peng Wang為第一作者,Lihong V. Wang (汪立宏)為通訊作者。

論文地址:

https://doi.org/10.1038/s41467-020-15745-4

 歡迎課題組投遞成果宣傳稿

轉載/合作/課題組投稿,請加微信:447882024

開 放 投 稿:Light:Advanced Manufacturing

ISSN 2689-9620

期 刊 網 站:www.light-am.com

這是中國光學發布的第1278篇,如果你覺得有幫助,轉發朋友圈是對我們最大的認可 

☞ 來源:中科院長春光機所·Light學術出版中心聲明:本文所用視頻、圖片、文字如涉及版權問題,請第一時間告知,我們將根據您提供的證明材料確認版權並按國家標準支付稿酬或立即刪除.郵箱:zhaoyang789@ciomp.ac.cn

相關焦點

  • 陳根:全球最快相機重磅出場,每秒70萬億幀
    陳根:全球最快相機重磅出場,每秒70萬億幀 2020-05-07 13:46 來源:澎湃新聞·澎湃號·湃客
  • 中國光學十大進展|每秒4萬億幀相機,把光拍成黑客帝國子彈
    《黑客帝國》裡的「子彈時間」不過,特效始終是特效,手槍子彈在無風條件下的速度也不過每秒數百米。西安交通大學教授陳烽領導的飛秒雷射微納製造實驗室,卻以突破性的解析度和幀頻,真實地將光的運動過程記錄了下來。
  • 現在相機上流行的截取視頻單幀畫面的功能真的靠譜嗎?
    一.4K視頻拍攝截圖優缺點優點:1、可以捕捉到更多的信息,不會漏掉精彩瞬間。不過放大之後會發現,視頻截圖的細節表現跟相機直拍還是存在一定差距的,因此如果有對畫質要求比較高的輸出用途的話,相機直拍圖還是優勢明顯。2、動態關鍵幀截取在動態場景中視頻抽幀的優勢就體現出來了。比方說你想抓拍精彩上籃瞬間,5D4每秒7張連拍在相機中不算弱,不過依然會漏掉其中的一些動作。如果在你按下快門的瞬間剛剛好跳過了精彩瞬間就頗為可惜了。
  • 每秒24幀?視覺和思維的騙局
    「電影是每秒24幀的真理」,戈達爾的這句名言影響了幾代電影人,影響範圍甚至擴大到了電影圈之外。李安在拍攝《雙子雙手》時,有好事者用「戈達爾說電影是每秒24幀的真理,李安說:不,120幀」這樣的標題來說事。
  • 為什麼大部分電影都是每秒 24 幀?|大象公會
    一個稍有觀影經驗的人都會告訴你:每秒24幀。24幀在電影界似乎有一種魔力。24幀原教旨主義者認為,這是電影藝術的代名詞,是電影質感的終極體現。在24幀凝重的速度裡,有一整個電影史的故事。所以,今年十月李安的新片《雙子殺手》以60幀和120幀的幀率登上大銀幕時,才吸引了如此多眼球,也引發了如此多爭議。
  • 為什麼電影24幀就很流暢 而遊戲30幀卻卡的要命?
    很多朋友或許都有這樣一個疑問:大部分電影的幀數都是24幀,播放起來非常流暢 ,肉眼根本捕捉不到任何卡頓現象;但是用電腦玩遊戲的時候卻完全不同,只要幀率在60幀以下,總是覺得遊戲變卡了,這究竟是為什麼呢?談論這個問題之前,有必要先為大家簡單介紹以下幀數是什麼。其實很好理解。幀數就是在1秒鐘時間裡傳輸的圖片的量。
  • 為什麼電影24幀就很流暢 而遊戲30幀卻卡得要命?
    很多朋友或許都有這樣一個疑問:大部分電影的幀數都是24幀,播放起來非常流暢 ,肉眼根本捕捉不到任何卡頓現象;但是用電腦玩遊戲的時候卻完全不同
  • 【雜談】每秒120幀的電影《比利•林恩》是什麼樣的視覺效果?
    《比利·林恩的中場戰事》(以下簡稱《比利•林恩》)最大的亮點就是它是世界上第一部採用
  • 上普產品介紹:Leica X Vario 用你的視角捕捉世界
    此外,還可以更改對焦點、白平衡和其他成像參數,從而可主動控制構圖內容和氛圍。在實時取景模式中,其 3 英寸高對比度顯示屏可賦予攝影師強大的操控力,即使在強光環境下,也能始終明亮、精微地顯示圖像。 視頻數據可採用網際網路常用的 MP4 格式保存,無需任何轉換即可直接上傳公眾媒體或行動裝置。內置風噪過濾器可以減少令人不適的噪音,從而保證了錄音音質如水晶般清晰。
  • 魔神動作捕捉技術的歷史演進
    2004年開發出全球第一套4百萬像素實時動作捕捉系統-Eagle4魔神發布400萬像素數字動作捕捉系統-Eagle-4,採用了美國Micron公司的MI-MV40傳感器,在2352×1728像素的模式下工作,頻率可以達到每秒200幀。較小解析度的情況下,採集頻率可升至10,000幀/秒。
  • Gopro並非沒有對手 盤點不能錯過的酷炫運動相機
    運動相機自誕生以來,就憑藉著小巧的體型,便攜的設計,不錯的畫質以及實現特殊鏡頭的拍攝而深受攝像師的喜愛。使用運動相機拍攝的畫面不僅具有衝擊力,而且採用頭戴式拍攝時,更貼近觀影人的第一視角,所以代入感會更加強烈。同時,運動相機均採用廣角大光圈鏡頭能夠大大減少了手持拍攝的抖動,大光圈也為暗光下的拍攝提供極大便利。
  • 器材 | 高性能便攜相機—徠卡V-Lux5
    具有直觀的操作理念和出色的可用性,它既是業餘攝影愛好者理想的入門相機,同時也是時尚高級攝影師的日常伴侶。配備徠卡DC Vario-Elmarit 9.1-146mm f/2.8-4 ASPH.鏡頭 (等效35mm畫幅25-400mm焦距),超大變焦範圍幾乎適用於所有攝影類型,並以在整個變焦範圍內提供出色的成像。
  • 為什麼電影24幀就行,但遊戲要60幀?
    而PAL/NTSC/SECAM三種電視信號規格,把幀數定在每秒25幀和30幀的原因,其實只是因為不同地區的供電頻率不同(50Hz和60Hz)……為了方便計算,採用NTSC制式的美國和日本,在遊戲中很自然地了沿用了每秒30幀的習慣(NTSC制式為29.97幀)。但為什麼看24幀的電影毫無違和感,但30幀,甚至60幀的遊戲中也會出現卡頓?
  • 送相機包 人文掃街利器富士X100V售價9690元
    自從2010年富士膠片推出固定鏡頭無反相機X100以來,造型復古優雅、操控便捷響應快速的X100系列一直倍受廣大攝影師及品位人士的青睞。視頻記錄方面,富士X100V能夠以每秒30幀的速度記錄4K視頻,或者以1080p每秒捕捉120幀的速度來創建慢動作效果。需要極高色彩保真度的製片人可以通過HDMI埠從外部錄製10位4:2:2色彩,當然,備受好評的膠片模擬在視頻記錄時同樣可用。
  • 除了無人機,DJI 還推出了一款手持雲臺相機
    那如果將無人機上的雲臺變成我們的運動相機會不會更加適合呢?今天早上 DJI 在英國倫敦宣布推出一款能在運動中捕捉清晰、穩定影像的一體化手持雲臺相機——Osmo,讓拍攝者得以錄製更加清晰,穩定的攝像效果。其高品質的機載增穩雲臺系統和航拍相機也備受矚目。
  • 算力達每秒11萬億次
    算力達每秒11萬億次2020-11-11 06:38出處/作者:快科技整合編輯:佚名責任編輯:chenshaojie   GPU方面也是八核心,包括128個執行單元,支持最多24576個並發線程(每單元192個),浮點性能高達2.6TFlops(每秒2.6萬億次計算),紋理填充率每秒820億,像素填充率每秒410億。
  • 2610萬像素人文掃街旁軸相機 富士X100V售價9790元
    自從2010年富士膠片推出固定鏡頭無反相機X100以來,造型復古優雅、操控便捷響應快速的X100系列一直倍受廣大攝影師及品位人士的青睞。富士X100V  視頻記錄方面,富士X100V能夠以每秒30幀的速度記錄4K視頻,或者以1080p每秒捕捉120幀的速度來創建慢動作效果。
  • 攝影愛好者們,2020年值得擁有的數位相機就在這裡
    沒有完美的相機,但Fujifilm的新旗艦機X-T4是款優秀的數位相機。 雖然,它沒有最高解析度,最大傳感器或最快性能。 但它的每個參數中的得分都很高,並且還是一臺時尚的機器,看起來和所拍攝的照片一樣漂亮,包括專用控制撥盤所提供的觸覺拍攝體驗。作為頂級APS-C相機,X-T4不一定適合所有的人。
  • 為什麼電影24幀就算流暢,主機30幀就算流暢,而電腦遊戲需要60幀流暢?
    t=117www.bilibili.com 【幀的概念】首先我們需要知道什麼叫幀數。下面這個GIF裡的玩具想必大家小時候都玩過,就是畫很多有細微區別的靜態圖畫連續播放,利用人眼的視覺暫留效應,他就會變成動畫,我們的電腦也是利用這個原理來工作的。FPS,也就是30幀每秒就等於30FPS。