安森美半導體最新的智能感知發展策略,以及全方位智能感知技術和方案

2021-01-08 電子發燒友
安森美半導體最新的智能感知發展策略,以及全方位智能感知技術和方案

電子技術設計 發表於 2021-01-07 11:31:22

智能感知技術在汽車、機器視覺和邊緣人工智慧等領域的應用越來越多。汽車是非常傳統的行業,最近幾年,電力化和智能化的發展為這個行業帶來了新的動力,各種感知產品的應用使汽車變得更安全、更舒適。

機器視覺同樣是一個歷史很悠久的行業,其應用廣泛且多樣化,涵蓋了包括電子製造、平板檢測、機器人、物流等在內的多個細分市場。

目前,中國已成為全球機器視覺市場增長最快的國家。邊緣人工智慧是新興市場,主要是由人工智慧、5G、IoT等新技術推動,發展非常迅速。

圖1:感知技術應用於汽車、機器視覺和邊緣人工智慧等領域。

 

 

 

安森美半導體近日舉辦了「智能感知策略及方案」在線媒體交流會,智能感知部全球市場及應用工程副總裁易繼輝分析了重點應用市場的需求和趨勢,介紹了安森美半導體最新的智能感知發展策略,以及全方位智能感知技術和方案。

 

 

 

圖2:安森美半導體智能感知部全球市場及應用工程副總裁易繼輝。

CMOS圖像傳感器的發明者

安森美半導體在成像傳感器行業有超過40年的歷史,在傳感技術方面經歷了多次併購,如Cypress的CMOS 圖像傳感技術、TRUESENSE的CCD圖像傳感技術,以及Aptina的高容量CMOS 和汽車圖像傳感器。

TRUESENSE的前身是柯達影像,柯達影像的核心技術來源于貝爾實驗室CCD影像。Aptina的前身是美國航天宇航局JPL噴氣式推動器實驗室。1993年,JPL為了阿波羅登月開發出全球首款CMOS圖像傳感器。27年過去了,CMOS圖像傳感器已得到廣泛應用。

從三年前開始,安森美半導體又陸續收購了IBM在以色列的毫米波雷達研發中心,以及專注於飛行時間(ToF)雷射雷達傳感器開發的愛爾蘭SensL公司,以滿足汽車自動駕駛、機器人、醫療成像等對LiDAR及傳感器融合的需求。

圖3:安森美半導體是CMOS圖像傳感器的發明者。

隨著第四代工業革命的到來,人工智慧對人類社會產生了巨大的影響。史丹福大學人工智慧專家、被人尊稱為「人工智慧之父」的Andrew Ng認為人工智慧是新的電力,如同第二次工業革命電力一樣,給整個人類帶來了深入的改變;數據是人工智慧的動力和發動機;感知是數據的燃料。

「安森美半導體的全系列智能感知方案包括圖像感知、多光譜、高光譜的感知,以及雷射雷達感知、毫米波雷達感知和傳感器融合等,這一切推動了AI和第四次工業革命的進步,」易繼輝說:「如果把人工智慧比作大腦,那麼我們就為大腦提供了眼睛。」

圖4:安森美半導體的全系列智能感知方案。

汽車感知爆發式成長

未來的汽車是一個架在四個輪子上、具有極強感知能力的計算機。ADAS攝像頭、倒車攝像頭、電子車鏡、駕駛員監控、乘務員監控、毫米波雷達和雷射雷達,現在最好的汽車感知系統已經遠遠超過了人類的感知能力。

「汽車成像是給人眼看的,如駕駛員、乘客、後視、環視、電子後視鏡,安森美半導體在全球佔>60%的市場份額;汽車感知是供人工智慧和機器視覺用的,安森美半導體佔全球>80%的市場份額,而且在逐年擴大。」

易繼輝介紹說,在人眼視覺中,圖像是為人眼所見並欣賞的,因此通常需要做到清晰、細緻、色彩豐富且美觀;而在機器視覺中,圖像需提供足夠的信息,例如邊緣、形狀、大小等,供算法讀取並理解。

汽車成像主要面臨三大挑戰:

一是寬動態,例如從灰暗的地庫開到正對太陽強光的戶外,夜晚在對向遠光大燈照射下感知樹蔭下的行人,這些都需要圖像傳感器具有高動態範圍。

二是環境條件,汽車應該能在東北零下幾十度的環境下行駛,也能在沙漠或者南方的高溫條件下駕駛。

三是對圖像傳感器來說十分獨特的挑戰:辨別LED指示牌和交通燈。圖像傳感器有時會因為頻率不同步而捕捉不到信號,這對於駕駛員人眼來說並不是問題,但對機器視覺卻是很大的挑戰。

圖5:汽車成像面臨三大挑戰。

隨著車聯網的發展,未來的自動駕駛汽車不僅是「可靠的汽車」,更是「可信的汽車」,具有功能安全性和網絡安全性。「Hayabusa是整個市場具有最高寬動態效果和第一款具有網絡安全功能的產品,最近已經上市。」易繼輝說。

易繼輝提到智能駕駛艙也越來越受重視,例如駕駛員識別、車椅位置調節、空調溫度、乘客監控等。

圖6:智能駕駛艙可進行駕駛員識別、車椅位置調節、空調溫度和乘客監控等。

在談到自動駕駛時,易繼輝形象地介紹了L0~L5的概念。他說,L1叫做脫腳(feet off),腳可以自由;L2是脫手(hands off),手可以放開駕駛方向盤;L3是eyes off,駕駛員的眼睛可以不看了;第四級是mind off,腦子不用想了;第五級叫做limit off,即沒有任何局限、可以在任何場景下自動駕駛了。

圖7:中國汽車駕駛自動化分級的智能感知配置。

「從L1到L5,傳感器的數量和種類不斷增加。最大的差別在L3和L4,L4必須要雷射雷達,對L3,雷射雷達是可選的。」易繼輝認為,「L3仍然需要駕駛員控制汽車,L4則完全不需要考慮駕駛員。L3就像加減法,L4是微積分:加減法永遠算不出極限值,只有微積分才能算出極限值,所以只有在L4的情況下才能涵蓋所有極限情況。」

圖8:安森美半導體汽車感知+視覺的總體方案。

毫米波雷達在L1~ L5的不同自動駕駛級別上有不同的應用。安森美半導體開發了一種叫做「MIMO+」的專利技術,能夠提供4D信息:距離(R)、速度(V)、角度(A)、高度(E),用於L3級的自動駕駛。

圖9:毫米波雷達技術在自動駕駛中的應用。

工業機器視覺和邊緣人工智慧應用

工業4.0、工業自動化、人工智慧使機器視覺市場快速發展。邊緣人工智慧不斷應用於一些新的領域,如新零售、智慧農業、畜牧業和農業。

「在新冠後疫情時期出現了一些趨勢:一是遠程化,遠程教學、遠程醫療越來越普遍;二是無人化,包括無人送貨車、無人商店等,減少了人和人之間的接觸,即無接觸化。」易繼輝說。

圖10:工業機器視覺及邊緣人工智慧市場增長。

易繼輝介紹,平板檢測是整個工業機器視覺行業中對圖像傳感器最具挑戰性的應用。從1K、2K、4K到8K,像素在逐漸擴大。

檢測過程分兩步:第一步是暗檢測,上電前主要檢測一些指紋、劃痕和其他物理問題;第二步是上電以後,特別是檢測OLED和最新的AMOLED(Active Matrix OLED)。

LED有一個亮板在後面作為發光源,而OLED和AMOLED的每個像素都是一個單獨發光源。像素和像素之間發光的強度和色彩的均勻度需要很準確地偵測出來,因而對圖像傳感器的要求很高。

過去檢測LED面板上的1顆像素,對應需要9顆像素(3×3),檢測OLED則需要16顆(4×4)甚至25顆(5×5)像素,因此對圖像傳感器的像素要求越來越高,從4,500萬到1.5億像素,甚至超過2億像素。

圖11:平板檢測對圖像傳感器要求很高。

從下圖可以看出,圖像傳感器的解析度逐年提升,從過去的200萬、500萬、800萬、1200萬像素,到現在超過2000萬像素。對於同樣尺寸的圖像傳感器,噪聲導數逐年隨著像素的增大而不斷提高。帶寬也在逐年增加。

易繼輝舉例說,一個29 × 29mm2 的標準工業用攝像頭,十年前可能只是200萬像素,後來逐漸增加到300萬、500萬、1200萬像素,今年已經達到了1600萬像素,這是由技術推動的。這些技術包括:

全局快門,在高速運動下圖像不會有拖影;

像素內圖像校正,以前是在系統裡通過軟體校正,現在直接在硬體裡,即像素內部做圖像校正;

工藝節點,從110納米到65納米,再到45納米甚至更小,成本、尺寸、耗電量逐年下降;

背照式,可提高感光能力;

堆棧架構,將模擬和數位訊號放在第二層,人工智慧的一些算法放在第三層,實現高智能化的圖像傳感器。

圖12:1.3英寸固定尺寸圖像傳感器的發展。

「我們用NVIDIA  Xavier  Edge  GPU做人工智慧訓練,精度可達97%,其中AR1335(1300萬)圖像傳感器可提供了高質量的圖像,提高了人工智慧的判斷精度。」易繼輝表示,「我們的目標是在工業機器視覺中利用人工智慧。」

圖13:採用AR1335圖像傳感器的水果新鮮度分類系統。

無接觸系統的成長潛力也非常大。安森美半導體的AR0230 HDR具有200萬像素及寬動態範圍,能提供很好的圖像質量,進而提高人工智慧的判斷精度,應用於無接觸付款以及飛機場、火車站、高鐵站等無接觸的通過閘口。

圖14:人臉識別付款應用(AR0230 HDR)。

結語

從第一次工業革命機械化到第二次工業革命電力化,到第三次工業革命計算機數位化,再到現在的第四代工業革命人工智慧化、信息化,人工智慧對人類社會的影響和改變遠遠超過計算機數字工業革命。

如果把人工智慧比作大腦,感知就相當於眼睛。安森美半導體提供了全面的感知技術,如圖像感知,多光譜、高光譜的感知,雷射雷達感知、毫米波雷達感知和傳感器融合等,所有這些技術都推動著人工智慧和第四次工業革命的進步。

責任編輯:lq

 

打開APP閱讀更多精彩內容

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容圖片侵權或者其他問題,請聯繫本站作侵刪。 侵權投訴

相關焦點

  • 安森美半導體全系列智能感知方案推動AI發展
    安森美半導體全系列智能感知方案推動AI發展 廖均 發表於 2020-12-18 17:32:30 智能感知技術在汽車、機器視覺和邊緣人工智慧等領域的應用越來越多
  • 讓汽車從「可靠」到「可信」,現有智能感知技術還缺什麼?
    那麼現有的汽車智能感知技術發展如何?距離「可信」汽車還有多遠?佔據60%以上汽車成像市場份額和80%汽車感知市場份額的安森美半導體在上周五的一次媒體溝通會上做出部分解讀。安森美半導體智能感知部門全球市場和應用工程副總裁易繼輝在媒體交流會上說,現在的汽車就像一臺架在四個輪子上的擁有極強感知能力的計算機,汽車的感知系統可以拆分為前視先進駕駛輔助系統(ADAS)攝像機、倒車攝像機、環視、攝像機監控(CMS)、艙內的駕駛員監控系統(DMS)和乘員監控系統(OMC)、毫米波雷達(Radar)和雷射雷達(Lidar)。
  • 如何使汽車更智能、安全、環保和節能?全方位領先方案了解一下!
    未來的汽車將結合超聲波、圖像、雷射雷達 (LiDAR) 、雷達、傳感器融合、人工智慧 (AI) 等多種技術,且隨著共享車的興起和自動駕駛的發展,要求汽車不僅可靠而且可信,功能安全變得至關重要,加之車聯網的普及,網絡安全也尤為重要。安森美半導體具備全面的感知技術並注重功能安全和網絡安全,為汽車艙內感知和外部感知提供完整又可信的方案。
  • 打造新一代智能電錶/感知層的解決方案
    姚玲玲 (羅姆半導體(上海)有限公司 技術中心 助理經理)本文引用地址:http://www.eepw.com.cn/article/202003/411452.htm
  • 安森美:發力第三代半導體和圖像傳感器 看好半導體五大應用市場增長
    2019年,安森美正式進入財富美國500榜單,進入全球半導體行業集成器件製造商榜單前TOP15。 如何看待2020年受到疫情影響下的半導體市場發展?2021年半導體市場有哪些新的技術走向?哪些半導體應用領域將會在2021年興起?對於今年下半年出現的半導體領域元器件缺貨,安森美如何應對?
  • 我校成功舉辦第四屆CCF智能感知與城市計算前沿論壇
    劉馳教授做題為《無人邊緣智能》的專題報告,探討如何利用深度強化學習和時空數據特徵提取技術調度無人機進行數據採集,以及其在在智慧交通、災後救援等方面的應用。張蘭教授做題為《大規模AIoT場景中的數據智能和隱私安全》的專題報告,圍繞多源多模態感知數據的理解、價值挖掘、質量評估、隱私安全和智能服務進行分享和探討。程時偉教授做題為《智能視覺感知及其在人機互動中的應用》的專題報告,介紹了國內外研究現狀的同時給出基於眼動跟蹤的人機互動應用框架,並介紹科研團隊的近期研究成果。
  • 商湯科技發布L4級接駁小巴和智能路側感知解決方案,構建智慧出行新...
    基於長線的原創AI技術積累以及與眾多車廠、行業夥伴豐富的合作經驗,商湯科技正充分把握AI與5G協同創新契機,構建智慧出行新基建,賦能V2X產業的創新與發展。  商湯科技研發執行總監石建萍在發布會上表示,「在AI+新基建時代,出行產業的智慧化升級將帶來服務創新、管理創新以及模式創新。商湯科技將通過智慧出行解決方案,全面賦能打造『聰明的車』與『智慧的路』。
  • 專家解讀安森美發展戰略:積極布局三大市場,通過併購豐富產品線
    、營銷及方案工程高級副總裁David Somo,與芯東西等媒體進行線上交流,分享安森美半導體最新發展戰略。其中,汽車、工業、通訊和計算是安森美半導體重點關注的三大快速增長市場。 安森美半導體預計,未來3~4年內,這三大市場將持續增長。 在汽車市場,安森美半導體提供傳感器產品和解決方案、圖像傳感器、雷達、寬禁帶半導體產品等。
  • 安森美半導體2020年三大關鍵詞:疫情、併購、缺貨、SiC
    「疫情的出現,一方面導致了近期全球經濟受到衝擊,另一方面也進一步強化了電子市場的重要趨勢」,安森美半導體公司戰略、營銷及方案工程高級副總裁David Somo如是說。 在他看來,由於疫情的衝擊,計算平臺和通信技術在遠程辦公和無接觸電商的興起下成為電子市場發展的重要趨勢。 縱觀全球經濟數據,預計2020年GDP增長率將從2019年的+2.8%  下降至-3.7%。
  • 專訪地平線副總裁張玉峰:智能駕駛需兩條腿走路,提供感知層的深度...
    正因如此,也加速了汽車行業內傳感器、計算晶片等相關技術的爆發增長。在汽車智能駕駛相關技術發展時期,地平線就是一個不可或缺的角色,其從最早的ADAS解決方案再到現在的新一代Matrix自動駕駛計算平臺,一直處於較為領先的位置。
  • 找尋智能傳感領域的「隱形冠軍」,SIA聯盟感知領航獎正式啟程
    上海2020年6月23日 /美通社/ -- 為鼓勵技術創新、幫助企業品牌價值提升,見證並記錄智能傳感領域的創新發展歷程及市場成果,推動智能感知上下遊產業鏈產業化進程,獎勵在技術創新及促進技術成果產業化發展中做出貢獻的企業和個人,中國傳感器與物聯網產業聯盟將舉辦首屆「感知領航獎
  • 塗鴉智能:萬物感知、萬物互聯 打開消防傳感智能新世界|萬裡行廣州
    塗鴉智能傳感產品專家劉亞文分享了以《消防傳感的智能新機遇》為主題的演講,以下是演講內容。     隨著移動網際網路,物聯網及大數據、雲計算、人工智慧等科技技術的迅猛發展,消防傳感智能時代如今已經到來。塗鴉是全球化的AI+IoT平臺,希望以AI+IoT平臺為核心,幫助企業將設備接入平臺,快速實現各個領域的產品智能化。
  • 從感知到認知的飛躍 智能GIS技術再升級
    近年來,人工智慧與GIS的結合越來越受到業界重視,MapGIS 10.5 IGServer—S智能GIS產品也在人工智慧方面取得了技術突破,可以為城市的智慧化運營提供決策支持,實現從感知到認知的飛躍。
  • 「智能配電網態勢感知」專輯主編寄語
    但是態勢感知明確用於智能配電網還是一個比較新的嘗試,《電力系統自動化》編輯部王青副主編對本人在一次講座中提到的配電網態勢感知非常感興趣,力邀本人為期刊組織一次專輯,於是促成了本次「智能配電網態勢感知」專輯的誕生。
  • 山東:智慧感知體系讓「服務有溫度管理更智能」
    近日,山東省公安廳出臺專門意見,明確「2020年建成感知大數據資源生態圈、2021年建成感知大數據應用圈」的工作目標,細化了智能感知、數據匯聚應用、基礎支撐、基層基礎減負增效等一系列具體做法,努力實現「服務群眾有溫度、管理管控無感知」,為公安工作和經濟社會發展提供強大動力。
  • 武漢康普常青:構建萬物互聯,光纖智能感知未來
    其研發團隊囊括了電學、光電傳感、物理仿真、大數據處理、人工智慧等多學科領域的專業技術人才,含碩士若干,教授級研究員及博士數名,完成了多個國家「973」項目、「863」項目,發明專利若干,是集科研、生產、銷售於一體的自主研發光纖智能感知系統的高新技術企業。
  • 0607感知增強:智能音箱的變化 |經濟學人
    Amazon Echo、Google Home和Apple HomePod這類智能音箱的普及程度正在迅速提高。如今經常可以聽到人們向這些助手打聽天氣預報或最新交通路況,或者讓它們播放有聲書或來自流媒體服務的音樂。但是智能音箱只能根據聽到的內容採取行動,因此對附近的物體和人幾乎全無了解,也不明白這些人可能想要做什麼。
  • 全場景智慧感知新生活,華為第四家智能生活館在深開業
    6月6日,華為深圳智能生活館在福田區卓越中心正式啟幕。這是華為在華南地區開設的首家獨棟智能生活館,也是華為繼太原、上海、杭州布局之後在中國區開設的第四家智能生活館。   「未來生活新感知」是華為對深圳智能生活館的設計理念。作為距離華為總部最近的智能生活館,該館不僅從外觀規劃和設計上更加新潮,更在消費者體驗和智能家居、智慧生活上帶來新的突破。
  • 未來智能網絡長啥樣?感知、通信、計算協同融合
    來自全國的高校、學術團體、科研機構的專家,就毫米波異質集成電路、信息超材料、未來智能網絡、6G全頻段全場景普適信道建模探索等話題進行探討。 當前全國新一輪科技革命和產業變革深入推進,信息技術日新月異,5G與工業網際網路的融合將加速數字中國、智慧社會的建設,加速中國新型工業化進程,為中國經濟發展注入新的動能,為疫情籠罩下的世界經濟創造新的發展機遇。
  • 清華系創業企業清雷科技發布雷達入侵存在感知方案
    近日,清華大學技術孵化的北京清雷科技公司發布了入侵/存在毫米波雷達智能感知方案。此前,清雷科技在第三屆中國國家進口博覽會上攜手Infineon推出的生命體徵監測雷達方案曾引發業界高度關注。