360全景2D向3D升級 晶片向高集成低功耗方向發展

2020-12-13 華強電子網

360全景2D向3D升級 晶片向高集成低功耗方向發展

  360全景從2D到3D的升級,算法所需要的硬體資源幾乎呈數量級的增長,因此也需要圖像處理晶片來保證算法運算所需要的資源開銷,以最少的資源獲取最高的效率,是圖像處理晶片需要解決的技術問題。因此除完善優化軟體算法方式外,圖像廠商以及ADAS廠商還需從選取硬體平臺著手考慮,並解決這一過程所面臨的問題。

  在傳感器方面,要實現相關的ADAS功能,圖像的清晰度十分重要,由於30萬像素的模擬攝像頭採集回來的圖像信息不夠清晰,因此360全景的標清方案能夠加上ADAS的功能並不多。用上百萬像素攝像頭的高清方案,方可以實現2D和3D的360全景高清圖像。

  此外,由於各大ADAS供應商和算法公司都公布了未來雙目,三目,甚至是八目攝像頭的產品路線圖,新車碰撞測試(NCAP)要求不斷提高以及自動駕駛更高的安全性要求,多圖像處理又是大勢所趨,因而對處理器的性能也提出了更高的要求。

恩智浦主動安全產品市場經理趙毅

  在處理器方面,恩智浦主動安全產品市場經理趙毅指出傳統的VGA全景平臺圖像處理能力差,發熱大,無法支持高清和ADAS應用的需求,因此需求處理能力更強大,功耗控制更好的處理器。除此之外,ISO26262功能安全標準也是360全景集成ADAS的一道門檻。為解決這一難題,恩智浦開發了S32V系列圖像加速處理器,不僅符合功能安全要求,其優秀的功耗控制以及豐富的選型可支持從低端到高端的360全景應用。

瑞薩電子大中國區應用技術中心汽車電子部部長林志恩

  此外,趙毅補充道,360全景從2D升級到3D,對處理晶片圖像渲染能力提出更高的要求。很多整車廠希望汽車點火後360全景能立即啟動並在顯示屏上進行360度旋轉顯示周邊路況,這對系統啟動時間也提出了很嚴格的要求。對此,瑞薩電子大中國區應用技術中心汽車電子部部長林志恩向記者透露:「瑞薩R-Car產品集成了專用的2D,3D的圖像處理器,在ADAS方面有專用的圖像糾正(IMR)和識別(IMP)應用的處理器,並且提供相關的軟體庫方便客戶進行算法和應用的開發。」

  在諸多要求及挑戰下,晶片廠商開始考慮將圖像處理從專用晶片向一個片上級晶片系統(SOC)集成,由此帶來的是功耗與體積的雙重利好。如新一代採用16nm的工藝的R-Car產品就帶有8個ARM內核,並已集成各種圖像處理器。林志恩稱,R-Car產品具有高性能的2D/3D圖型處理器,內置了攝像頭變形矯正IMR處理器,以及專用於ADAS圖像識別的IMP第5代處理器,並且支持最多8路攝像頭輸入和3路視頻輸出,滿足功能安全ISO26262的ASIL B等級要求(ASIL有四個等級,分別為A,B,C,D,其中A是最低的等級,D是最高的等級。ASIL等級決定了對系統安全性的要求,ASIL等級越高,對系統的安全性要求越高,為實現安全付出的軟硬體開發代價也越高)。

  同樣,恩智浦也推出了其自動駕駛汽車平臺「BlueBox」,不僅提供強大的計算引擎以支持多傳感器的數據處理,定位,路徑規劃,並也已提供給多個全球領先的ADAS供應商進行自動駕駛的開發。

  圖像處理從專用晶片向通用SoC多晶片集成方向發展,這對圖像處理晶片廠商來說,主要的挑戰還是圖像處理技術上的集成和整合,還有就是處理能力和效率上的提升。但是對於晶片下遊的方案廠商來說,關注更多的是晶片能否滿足開發需求。

  「晶片集成的東西越多,我們在這基礎上能開發的功能就越多,就更能夠滿足客戶的需求。」李平山告訴記者,在技術不斷的積累的過程中,車侶網絡下一步將會考慮和晶片廠商合作把部分成熟的的算法集成到晶片上,這樣的市場將會更大。

  結合時下最為炙熱的自動駕駛汽車領域,從360全景到ADAS圖像融合來看,大數據、深度學習技術將會日趨成熟,而攝像頭又是汽車的眼睛,未來汽車對圖像處理、機器視覺技術的需求將越來越強烈。因此,未來的汽車圖像市場肯定越來越大,新的需求也會越來越多。高集成的圖像晶片就要求更小體積,更高效率,更低功耗。李平山表示,為順應這一時代要求,方案商需要提供更多的功能,更高的準確率,更低的價格,更好的服務。

  由於汽車產業鏈各環節均在積極備戰無人駕駛技術,視覺提供給汽車的功能也越來越多,在小體積化的要求下,除360全景和ADAS集成外,其他圖像處理也將匯集一處,然而目前的汽車圖像識別技術在識別率,智能判斷上距離無人駕駛的要求還有不小的差距。趙毅告訴記者:「個人認為圖像算法的突破點還是在深度學習技術的應用上。而深度學習需要的巨大的運算能力將給處理器功耗帶來巨大的挑戰。雖然有些半導體供應商要求液冷等熱處理方式,但其可靠性還有待考驗。」

  林志恩則表示,瑞薩電子針對無人駕駛汽車推出的R-Car產品具有駕駛艙(Cockpits)應用的概念,系統除360全景和ADAS集成外,虛擬圖形儀表,導航多媒體信息娛樂也匯集在內。此外,林志恩還強調:「視覺是無人駕駛技術重要的一部分,行人、車輛、車道線和交通標誌檢測都是需要圖像晶片和算法進行處理。因此晶片需要應對越來越複雜的圖像進行處理,壓縮,解碼和傳輸速度,而算法實現的運行速度等要求會越來越快,因此持續研發和推出產品方能滿足汽車無人駕駛技術的要求。」



本文為華強電子網原創,版權所有,轉載需註明出處

關注電子行業精彩資訊,關注華強資訊官方微信,精華內容搶鮮讀,還有機會獲贈全年雜誌

關注方法:添加好友→搜索「華強微電子」→關注

或微信「掃一掃」二維碼

相關焦點

  • 雙發機制有效降低TWS耳機功耗 讓性能與功耗背向而行
    以紫光展銳的晶片為例,它是超低功耗設計,帶載功耗在9mA以內,此外對於TWS的小巧設計可以支持4小時以上連續播放。」而作為國際大廠,Qualcomm在此方面有自己獨到的見解:「如今,消費者越來越期待無線耳機可以實現媲美有線耳機的音頻性能,如支持主動降噪、高解析度音頻等。然而,個人音頻產品是最具挑戰的產品,由於產品外觀設計小巧,想要集成一些複雜的產品特性、進行音頻處理都變得非常困難,小尺寸設計對電池容量提出了需求,因此超低功耗至關重要。」
  • ETA9697+MCU高耐壓低功耗蘋果藍牙TWS耳機移動電源充電晶片
    ETA9697新型充放二合一藍牙充電倉解決方案,採用ESOP8封裝,該晶片是在原有ETA4056+ETA1061混組方案上的又一次集成,非常適用於高端的藍牙耳機盒子相對於傳統的藍牙充電盒電路,ETA9697具備超高的可靠性和極致的體驗。
  • 汽車360全景2D和3D區別是什麼
    【太平洋汽車網】一般來說,全景視頻是不分2D與3D的,全景都是3D,區別只是景深明不明顯的問題。360°全景影像輔助系統可以讓車主更直觀明了地看到車外情況,而且系統還做到了人做不到的,人的視覺有盲點,它可以彌補。
  • 低功耗長續航的TWS藍牙耳機晶片春藤5882性能如何?
    宏觀上看藍牙耳機技術領域有幾個發展方向:一是藍牙耳機耳機以後將會是語音識別的一個重要入口,新款蘋果AirPods也加入了語音識別;二是延時會越來越低,當前的藍牙耳機用來語音通話或看電影比較多,但是未來戴藍牙耳機打遊戲將會是一個趨勢。
  • 3D動畫和2D動畫比哪個製作成本高?
    #動畫#現在的動畫幾乎找不到純2d動畫了,都是3d+2d混用了,2d主日常畫面,3d主戰鬥畫面,據我所知,最早的應該是EVA開始使用三渲二用3d技術製作戰鬥畫面替代2d打鬥的,這個可以明顯看出來,EVA的戰鬥動作流暢度和同期的比起來(如犬夜叉、秀逗魔導士等)簡直不是一個次元的。
  • 還在用2D 360°全景?3D 360°才是未來
    您的車肯定沒安裝360全景影像系統!而且肯定沒安裝3D360全景!麗電威旗品牌3D全景360影像給你全部答案!「行車不規範,親人兩行淚」是出自《流浪地球》中的一條交通安全宣傳語,但行車規範真的能確保安全嘛?其實不然,盲區的存在讓車主無法獲得車身周圍所有的信息,車主無法知道車頭是否蹲著個小朋友,車尾是否趴著只小動物,畢竟看不見的才是最危險的。
  • 新途銳改裝升級原廠360全景,超高清2D/3D畫面更安全
    途銳作為大眾進口汽車歷史上第一臺真正意義上的SUV車型,從2002年誕生開始,在不斷推動升級下,一直都是大眾進口汽車旗下最先進科技的載體。新款途銳車型,只有20款的銳尊版、銳享版、百萬紀念版標配了360全景影像,就連19款頂配銳智版都沒有標配。需要後期改裝升級。
  • ARM出低功耗Cortex-A7晶片
    ARM出低功耗Cortex-A7晶片 2011年10月21日 00:21作者:張偉(編輯)編輯:張偉(編輯)文章出處:泡泡網原創     泡泡網CPU頻道10月21日 一直以來由於性能的低下,ARM都在走性能發展路線,雖然由於簡化的流程以及高度整合,功耗控制在一個比較合理的位置,但是智慧型手機脆弱的續航時間,使得晶片不得不做出一定的讓步,或降低頻率或增大電池容量。
  • 2020,來「盤」 |多款5G集成手機晶片發布,產業前景普遍向好
    一年來,中國已建成全球最大的5G網絡,藉助5G發展東風,5G手機晶片迎來大發展。如華為、高通、蘋果、三星、聯發科、展銳等企業相繼推出擁有先進位程的5G手機晶片,為5G產業發展提供極大助力。
  • 免換電池,無線射頻晶片顛覆者將低功耗藍牙模塊功耗降百倍
    9月22日,謀思科技(Atmosic Technologies)(以下簡稱Atmosic)線上舉行媒體交流會,介紹了其Atmosic的M2和M3系列低功耗無線物聯網(IoT)晶片產品和解決方案,並與媒體共同探討物聯網無線技術的發展。「我們希望實現免換電池的永久續航,更希望實現無需電池的物聯網連接方案。」謀思科技執行長David Su博士表示。
  • 3d全景效果圖製作方法
    這裡所說的3d全景效果圖一般都是360全景圖,360全景圖又可分為不加熱點的全景圖和加熱點的全景圖兩種,而不管是加熱點的360全景圖還是不加熱點的360全景圖都可分為適合在電腦端播放的360全景圖和適合在手機端播放的360全景圖,那麼3d全景效果圖是如何做的呢?
  • 想升級又擔心電源不足?選這些低功耗卡
    目前隨著顯卡技術的發展,顯卡的功耗比有了顯著的發展,即使是性能很強的甜品級顯卡功耗一般也就在100W左右,玩普通的遊戲可能還沒有這樣高的功耗,所以想升級的玩家可以放心的升級自己的電腦。那麼現在的哪些顯卡適合老電腦的升級呢?
  • 這一次,國產2d動畫戰勝了3d動畫?
    國產動畫無論是數量、質量,口碑還是市場影響,這些國產動畫都非常不錯,同時帶領國產動畫整體水平的升級。這些國產動畫的屬性,還是有著很大的不同。《一人之下3》《百妖譜》《大理寺日誌》《霧山五行》是2d連載動畫。
  • 向經典致敬,老豐皇冠安裝車鷹視3D全景360度,行車安全輔助
    舊款豐田皇冠原車屏幕升級安裝了鷹視3D 360全景+解碼器,安裝360全景驅動記錄器的主要功能用於駕駛記錄,比起後視鏡驅動記錄器和普通驅動記錄器,全景驅動記錄器的功能更強,車鷹視360全景驅動記錄器有四個廣角的攝影俯瞰,沒有360度無盲區駕駛、倒車等功能,3D流媒體自動啟動360度一周,圖像軌跡自動移動
  • 3d全景是什麼意思?3d全景圖怎麼做的
    3d全景便是如此,它的出現給我們帶來很多以往圖文視頻所不能達到的體驗。3d全景是什麼呢意思?3d全景圖又被很多人稱為三維全景和vr全景,實際上是一種新的展現方式,不同以往的是能夠給人帶來很好的沉浸感,對所展現的空間有一種仿佛身臨其境般的體驗。
  • CEVA計算機視覺DSP助力 Evomotion ROD-1 360°全景相機
    > 採用CEVA-XM4 DSP的Rockchip RV1108視覺處理器處理Evomotion的高解析度實時拼接比採用CPU/GPU實現方法低70%的功耗 CEVA,全球領先的智能和互連設備的信號處理IP授權許可廠商 (納斯達克股票交易所代碼:CEVA) ,和業界領先的結合硬體解決方案的深度學習和計算機視覺供應商
  • 深圳途銳改裝原廠360全景影像,2D、3D效果更清晰
    大眾途銳多年來有著輝煌的戰績成就,本身就是豪華SUV領域不可多得的多面全能手,這一次帶來的第三代全新車型更是升級了科技化、智能化裝備,將帶給你無與倫比的道路、越野駕駛體驗。不過,途銳的2.0版本還是有很多的提升空間的,部分基本配置都沒有配備,比如說360全景影像。
  • vr全景技術講解丨3d全景效果圖製作教學
    如今隨著5G的逐漸普及VR技術又開始頻繁出現在我們的視野當中了,5G的高網速能夠解決VR技術所存在的傳播難和體驗差等問題。就拿體驗來說,以往的vr視頻等被觀看時有時候會容易給人帶來暈眩的感覺,而5G的高網速便能很好的解決這一問題。目前,我們所看到的vr內容還主要是vr全景為主,很多人看到時難免會有疑惑這些3d全景效果圖是如何製作的,這我們就為大家講解一下3d全景效果圖的製作教學。
  • 笙科推出新型藍牙低功耗SoC晶片A8115
    笙科電子(AMICCOM)於2018年3月發布A8115, 新一代 藍牙低功耗 (Bluetooth LE) 晶片,A8115為高整合的BLE SoC ,是 笙科A8105的下一代BLE SoC,並且兼容於BLE 5.0 規格。
  • TWS電源管理晶片的發展
    TWS電源管理晶片的發展 核芯產業觀察 發表於 2020-11-30 11:11:40 TWS耳機電池在低功耗、高耐壓、高集成等方面提出更高要求,倒逼電池管理晶片技術升級革新