誰將成為未來機器視覺應用領域的王者?

2020-12-04 騰訊網

無處不在的機器視覺

無人機越來越聰明了!很多使用者都有這樣的感慨。從前操作無人機都要小心翼翼,唯恐突遇障礙物擋道,遭遇炸機之慘禍。現在的無人機則完全可以騰挪躲閃,及時迴避飛行路徑中的各種障礙物,讓很多初學者也可以輕易駕馭。

變聰明的無人機有什麼秘技嗎?答案就是有了機器視覺技術的加持。通過機器視覺技術,無人機不但能感知障礙物,還能知道自己和障礙物的距離,實現精準的避障和繞障。

機器視覺的概念源自於機器人領域,美國機器人工業協會對其定義為:「通過光學的裝置和非接觸的傳感器自動地接收和處理一個真實物體的圖像,以獲得所需信息或用於控制機器人運動的裝置。」

機器視覺常以完整系統形式出現,通常可劃分為光學成像、圖像傳感器、圖像處理、IO和顯示等五大模塊。這其中,以全局快門Global Shutter (以下簡稱GS)CMOS傳感器為代表的圖像傳感器推動了機器視覺系統近幾年的大發展。

(圖片來源於騰訊視頻:思特威Global Shutter技術與前沿機器視覺應用視頻)

正是有了CMOS圖像傳感器,機器視覺早已不再是工業自動化領域的專屬名詞並已經輕鬆融入了我們的生活當中,因此也有了「消費級機器視覺」這一新興領域及概念。比如,進入很多家庭的掃地機器人,配備了機器視覺技術,可以徹底清掃衛生死角。小巧便捷的翻譯筆,因機器視覺技術,可以讀懂多種語言。而工業自動化生產線上,依然使用機器視覺系統自動完成高度精密的自動化製造及對不良產品的檢測等。

而隨著AI應用的廣泛落地,例如掃臉支付、人臉識別門禁/門鎖更是以極快的速度滲透到了人們的工作和生活中。連商場裡也不乏智能互動電子屏、智能穿衣鏡等基於AI及機器視覺的交互類智能視頻設備的身影。

總體來看,CMOS圖像傳感器已藉由「消費級機器視覺」的紐帶與我們的生活完美契合在了一起。

(圖片來源於騰訊視頻:思特威Global Shutter技術與前沿機器視覺應用視頻)

CMOS傳感器的新崛起

CMOS是當今主流的圖像傳感器技術之一,與之對應的是曾經的霸主CCD圖像傳感器。

1970年,CCD圖像傳感器在Bell實驗室發明,CMOS圖像傳感器在NASA的噴氣推進實驗室JPL製造成功。但是,CCD依靠高量子效率、高靈敏度、低暗電流、高一致性、低噪音等特性,一直成為圖像傳感器市場的主導,直到90年代末才被CMOS拉下神壇。

與CCD圖像傳感器相對比,CMOS圖像傳感器具有低功耗、低操作電壓、片上集成功能、性價比高等優勢,但是在初期由於相對較差的性能和較大的像素尺寸,並沒有得到重視。後來隨著工藝製程水平的不斷提高,CMOS圖像傳感器才逐漸開始展現出CCD圖像傳感器不具有的優勢,在圖像傳感器領域的市場攻城略地。時至今日,手機、相機已經全部淪為CMOS傳感器的天下。

不過CMOS圖像傳感器卻絲毫沒有止步的意思。進入21世紀後,隨著機器視覺在工業自動化、無人機、智能家電中的應用,CMOS圖像傳感器又迎來了新一輪的發展浪潮。

因為機器視覺的應用特性,CMOS圖像傳感器面臨新的挑戰。如果以前只是要求成像細緻、色彩鮮豔的話,現在則要求快速捕捉(高幀率),無形變(全局快門)和非可見光下成像(近紅外增強技術)。畢竟,這次服務的對象從人換成了機器。

GS的引入是一個重大革新。它使得CMOS傳感器同時曝光來擷取不失真的運動物體圖像,這對機器視覺的領域有重大意義。

GS的基本原理是傳感器可以同時掃描圖像的整個區域。在GS傳感器中,使用所有像素同時捕獲圖像。

舉例來說,以前的背照式(BSI)傳感器均為捲簾快門,因而會在拍攝高速運動的物體時產生「果凍效應」造成物體嚴重變形,但擁有全局快門的傳感器則能夠通過讓傳感器上的單個像素點在同一時間捕捉到光線信號從而有效解決這一問題。

而最早洞察這一趨勢的是一家國內的圖像傳感器設計公司,思特威在2017年就以前瞻性的眼光開始布局其GS技術的研發,並於2018年就發布了全球首款基於BSI像素工藝的商業級30萬像素GS CMOS圖像傳感器——SC031GS,成為率先進入「消費級機器視覺」應用領域的CIS企業先鋒。

該產品創造性地將BSI像素設計工藝與GS圖像傳感器設計巧妙結合在一起,提供信噪比更佳、靈敏度更高與動態範圍更大的成像性能,可應用於智能讀碼器設備、無人機、智能模組(Gesture Recognition/ vSLAM/ Depth Information/ Optical Flow)等諸多圖像識別類AI應用領域,而GS CMOS傳感器也迎來了無比寬廣的發展空間。

戰略眼光成就GS傳感器新貴

作為圖像傳感器領域的前沿,GS CMOS傳感器的研發成為了業界關注的焦點。尤其是,高解析度的GS CMOS設計和生產門檻都很高。

可喜的是,以思特威為代表的中國高新CIS企業已經在這個領域佔據了先機。就在前不久舉行的SPM 2020思特威合作夥伴大會上,思特威創始人兼董事長兼CEO徐辰博士指出,除了在安防應用領域繼續保持領先的市場份額外,思特威早在2017年就布局的消費級Global Shutter圖像傳感器市場今年亦收穫佳績,在消費級機器視覺領域出貨量躍居全球首位!面對這樣的市場成績,思特威並未停下對GS技術進階創新的腳步。在SPM 2020大會上徐辰博士繼而發布了思特威2nd Gen SmartGS 技術,通過提升pixel size來增加感度和暗光效果,提升率可達30%,另一方面採用並行電壓域讀取,大大提升了最大快門速度,完善對高速運動物體的清晰抓拍。據介紹,該技術基於全新的電容工藝,其讀取噪聲可降低一倍以上,同時兼具區域 HDR技術,可大大提升特定位置的動態範圍,解決了夜間拍攝信號燈成像過曝等問題,可謂大放異彩。而下一代3rd Gen SmartGS Technology的研發已經在路上,預計將在明年和大家見面。

在尖端GS技術的加持下,思特威今年陸續推出了數款賦能不同機器視覺應用領域的GS產品。如賦能智能駕艙DMS系統的全新130W像素全局快門圖像傳感器——SC133GS,採用2.7μm像素及1/4″光學尺寸,憑藉思特威領先的GS技術優勢,可以為DMS系統及時提供無形變、無偽影的高清可識別影像,為系統進行及時精確的判斷提供堅實的基礎,有效監測駕駛員駕駛狀態,保障行車安全。

(圖片來源於思特威SC133GS產品發布新聞)

而在智能交通系統(ITS)應用領域,思特威今年亦發布了SC410GS,該產品採用400萬的BSI像素結合全局快門技術,可精準捕捉快速運動的物體,成像無尾影、不形變,大大提升了智能交通系統對車牌的精準捕捉及高效識別。而在SPM 2020大會上,思特威也現場展示了SC410GS覆蓋2-4車道的ITS實際應用演示影像,博得了來賓的一致肯定。

而後續,思特威還將發布面向ITS應用更高解析度的SC910GS(即900萬BSI與GS技術結合產品)以及在信噪比、高溫成像、近紅外增強及HDR上全性能升級的SC035HGS(mono/color)產品,賦能更多AI及消費級機器視覺應用終端。

結語

隨著硬體方案的不斷成熟和運算能力的提升,機器視覺在多個領域應用的廣度和深度均在提高。作為核心部件的GS CMOS傳感器,在設計和工藝不斷改進的條件下,還將繼續推動機器視覺的應用在各個領域進一步普及,並為人們的生活帶來更多智能與美好。

(校對/範蓉)

相關焦點

  • 三維視覺將成為機器標配的眼睛
    三維視覺將成為機器標配的眼睛 梁傑民 發表於 2020-11-23 15:11:00 在過去,機器視覺通常指的是二維視覺系統即通過攝像機拍攝一張平面照片
  • 機器視覺應用大盤點:哪一個領域能率先「上車」?
    人臉識別也屬於圖像識別的一個應用場景,做人臉識別的大多數企業同時也在提供圖像識別服務,但是銷售效果不佳,主要贏利點還在於人臉識別。5.物體分揀在機器視覺應用環節中,物體分揀應用是建立在識別、檢測之後的一個環節,通過機器視覺系統將圖像進行處理,結合機械臂的使用實現產品分揀。舉個例子,在過去的產線上,是用人工的方法將物料安放到注塑機裡,再進行下一步工序。
  • 人眼還是機器「眼」?機器視覺在工業檢測領域大有可為
    此外,通過對機器視覺的產業鏈情況進行分析,對行業進行梳理,有助於關注該領域的業內人士對機器視覺的未來趨勢作出預判。機器視覺在工業檢測中的應用歷史與發展機器視覺在工業上應用領域廣闊,核心功能包括:測量、檢測、識別、定位等。
  • 「十三五」安防領域機器視覺發展回顧與展望
    一、機器視覺技術發展與應用遠超規劃預期 「十三五」規劃在發展目標中提出「深入研究和應用人工智慧、機器視覺等前沿技術並取得若干突破」;在措施與建議中提出要推動「機器視覺、語音識別、生物特徵識別、安保機器人等關鍵技術的突破,提升智能技術在安防各領域的實戰應用和效能」和視頻結構化等智能化應用。
  • 科普:機器視覺技術原理解析及應用領域
    機器視覺系統是指通過機器視覺產品(即圖像攝取裝置,分 CMOS 和CCD兩種)將被攝取目標轉換成圖像信號,傳送給專用的圖像處理系統,根據像素分布和亮度、顏色等信息,轉變成數位化信號;圖像系統對這些信號進行各種運算來抽取目標的特徵,進而根據判別的結果來控制現場的設備動作。
  • 機器視覺系統與機器視覺檢測最常見的技術應用分析
    在機器視覺領域,最熱門的關鍵字就是機器視覺系統,機器視覺檢測以及機器視覺招聘了。這些關鍵字的熱度,從機器視覺論壇上就可以窺見一斑,在機器視覺論壇上,經常有很多專業人士會探討機器視覺算法與應用,以及與機器視覺相關的機器視覺光源方面的技術以及知識。鑑於機器視覺的專業性,很多機器視覺公司,主要從事機器視覺系統和機器視覺軟體的研究,售賣,這些也是機器視覺算法與應用研究的最終目的,也就是將知識轉化為商業價值。關於機器視覺的應用,我們可以從一些機器視覺應用實例中,去學習和借鑑。
  • ...機器視覺行業市場分析:以中小企業為主 已成為全球第三大應用市場
    機器視覺用機器代替人眼來做測量和判斷,是將圖像處理應用於工業自動化領域進行非接觸檢測、測量,提高加工精度、發現產品缺陷、進行自動分析決策的一項技術。        相對於人工視覺檢驗,機器視覺檢測擁有效率高、高精度、檢測效果穩定可靠、方便信息集成等優勢。
  • 工業控制領域裡機器視覺的作用是什麼
    從拾取和放置、對象跟蹤到計量、缺陷檢測等應用,利用視覺數據可以通過提供簡單的通過失敗信息或閉環控制迴路,來提高整個系統的性能。 視覺的使用並不僅僅在工業自動化領域;我們也看到了相機在日常生活中的大量應用,例如用於計算機、行動裝置,特別是在汽車中。攝像頭僅僅是在幾年前才被引入到汽車中,但是現在汽車中已經配備了大量攝像頭,以為駕駛員提供完整的360°車輛視圖。
  • 機器視覺應用的攝像頭設計
    摘要:本文將探討機器視覺應用的 CMOS 圖像感應器技術及架構要求。此外,還將詳細分析機器視覺的基本組件,攝像頭為滿足應用需求需要哪些條件,以及如何設計出可滿足各種機器視覺應用需求、同時又能在圖像質量與成本之間獲得平衡的攝像頭。
  • 機器視覺人臉識別技術在智能商業中的應用
    人工智慧領域主要分布在機器學習(通用)、機器學習(應用)、計算機視覺(通用)、智慧機器人、虛擬個人助理、自然語言處理(語音識別)、自然語言處理(通用)、實時語音翻譯、情境感知計算、手勢控制、推薦引擎及協同過濾、視頻內容自動識別等。
  • 基於ATCA AVP系統的高端機器視覺應用的解決方案
    基於ATCA AVP系統的高端機器視覺應用的解決方案 黃怡暾,凌華科技 發表於 2021-01-15 10:31:10   作者:黃怡暾,凌華科技工業計算機產品部 機器視覺的市場應用日益增加
  • 機器視覺檢測的分類和應用主要有哪些?
    我們大多數人都知道機器視覺檢測,它是目前應用在產品外觀缺陷檢測和質量檢測中的最為先進的檢測技術,隨著工業的不斷發展和科技的進步,機器視覺在智能製造和自動化領域中的作用越來越重要。機器視覺檢測技術的應用可以更大程度地把關,提高產品質量並降低生產成本,受到越來越多的企業青睞,應用範圍也在不斷擴大。那麼機器視覺檢測的分類和應用主要有哪些呢?下面瑞科智能為大家一一道來!一、機器視覺檢測的分類目前可從這三大類來分:安裝載體,功能作用和檢測技術。
  • 優必選研究院副院長程駿:機器視覺在服務機器人中的應用 | 直播預告
    服務機器人被廣泛應用於醫院、家庭、工地、辦公室和體育娛樂場館等領域,直接與人類共處,為人類排憂解難。機器人本身並不具有視覺感知能力,所以需要通過機器視覺技術賦予機器人一雙「眼睛」,從而讓機器人像人一樣具備檢測,判斷,識別等能力。
  • Xilinx與Silicon開啟硬體圖像處理機器視覺應用大門
    All Programmable技術和器件的全球領先企業賽靈思公司Xilinx,Inc.日前宣布,在與2014慕尼黑電子展同期舉行中國(上海)國際機器視覺展,將聯手德國Silicon
  • 機器視覺概念股有哪些?機器視覺概念股龍頭一覽表
    昨日,華為發布了下一代HoloSens SDC攝像機,稱要打造機器視覺第一品牌,另一場華為重磅會議即將舉行。  華為發布四無生態型新款攝像機  昨日下午,華為機器視覺發布了四無生態型攝像機HoloSens SDC,所謂四無生態即無電、無網、無光和無現場運維。此前,新聞有過報導稱,該攝像機已被安裝部署在海拔6500的珠穆朗瑪峰,是全球部署位置最高的攝像機!
  • 機器視覺在半導體封裝中的應用
    簡介:深圳市創科自動化控制技術有限公司是一家專業的視覺軟體開發公司,為客戶定製各種視覺應用,提供豐富的視覺功能。並且用戶可以通過VC、VB、DELPHI等工具進行二次開發。
  • 專訪「矽谷老炮」約翰•馬爾科夫:人與機器誰將擁有未來?-虎嗅網
    他們的團隊中有很多非常頂級的年輕AI研究者,所以他們一定會研究出重要的成果,而這些成果將向所有人開放。也就是說,任何人都可以拿來進行創造性的應用。這是一方面,意味著一切會變得更公平。比如Google的TensorFlow,Facebook也有類似的東西 [10],IBM將Watson作為一個IA的接口。看起來有點像人們正在競爭,看誰能造出一個AI作業系統。在PC時代,微軟一家獨大。那麼,在AI時代,誰能成為未來的霸主呢?我不知道,但我覺得,觀察他們的角逐是一件很有趣的事情。
  • 智能圖像處理 讓機器視覺及其應用更智能高效
    機器視覺(Machine Vision)是人工智慧領域中發展迅速的一個重要分支,目前正處於不斷突破、走向成熟的階段。
  • 讓機器理解三維世界,「商湯科技」暢想人工智慧3D視覺技術的未來
    最近10多年,家用遊戲機廠商將3D體感外設帶入大眾視野,帶來了新奇的體感遊戲。近三年,越來越多的智慧型手機開始配備3D傳感器,並在AI的加持下,開拓出了更多更具想像空間的應用場景。未來10年,AI+3D將無處不在,給我們的生活和工作帶來深遠影響。
  • 機器視覺的定義!機器視覺的優勢究竟有哪些?
    發表於 2019-05-08 13:43:50 隨著工業4.0時代的到來,機器視覺在智能製造業領域的作用越來越重要,機器視覺技術是如何工作的、它為什麼是實現流程自動化和質量改進的正確選擇等。