AI學會「挑刺」,可揪出光伏、PCB、晶片瑕疵

2020-11-23 EDN電子設計技術

AI 要能發揮價值、創造效益,落地到行業裡頭是關鍵,相較於營銷廣告、安防、新零售等,工業領域更像是一片藍海,目前在 AI 與工業的結合,多提到大數據優化生產排程、監控零部件或機臺設備運作以及故障預警等,還有一個領域也有不少研究及進展,就是生產過程中的瑕疵檢測,包括線路瑕疵、外觀瑕疵等。V3pednc

製造行業強調品質控管,把產品出貨給客戶前,必須確保其功能正常,一旦檢測出錯,會導致很大商業的損失,除了靠人力檢驗之外,在生產過程中,使用非接觸式的自動光學檢測(AOI,Automated Optical Inspection)或自動視覺檢測(AVI,Automated Visual Inspection)設備已經行之有年,旨在通過高精度攝像頭、機器視覺技術等,抓出有瑕疵或缺陷的產品,像是金屬零部件製造廠通過 AOI 設備來檢測金屬扣件、螺絲是否光滑、有無細微裂縫等,自動化程度相對較高的電子業,像是 PCB、PCBA 電路板、Wafer 晶圓及面板行業採用的比例也非常高。V3pednc

以電子業來說,市佔率較高的設備檢測商首推以色列公司奧寶(orbotech),在 PCB、面板領域有很高的市佔率,不過,美國的半導體檢測設備大廠科磊(KLA-Tencor)在去年 3 月收購了奧寶,擴大服務範疇。其他知名的公司還有像是美國的 Rudolph Technologies、日本 Takano 等。V3pednc

國內的檢測設備商像是東旭光電、惠州高視科技、神州視覺科技、力德創(LeadAOI)等。去年,東旭光電與京東方籤訂近 7000 萬人民幣的裝備訂單,包括宏觀及微觀缺陷檢測設備、玻璃邊緣檢查機等高端裝備,主要應用於 OLED 面板產線的缺陷檢測。而惠州高視科技的設備也應用於面板行業,進行屏幕的缺陷檢測,客戶包括京東方、華星光電、歐菲光等。V3pednc

隨著近年深度學習的興起,瑕疵檢測也出現新的技術演變,從傳統的 AOI 轉向與 AI 結合,不少初創公司開發用以檢測元件瑕疵的 AI 軟體,或與 AOI、AVI 設備結合使用。另一方面,檢測設備商也通過 AI 技術優化 AOI 設備的準確度。V3pednc

V3pednc
V3pednc

圖|矽谷公司 Instrumental 專攻 AI 瑕疵檢測市場(來源:Instrumental 網站)V3pednc

另外,去年中,阿里雲 ET 工業大腦提出 AI 視覺產品「見遠「,其中就有 AI 質檢員方案,當時阿里雲指出,在電池片瑕疵檢測領域,「見遠」的識別準確度達 95%,節省人力率比為每 33 個人節省 1 人。通過深度學習和圖像識別算法,阿里雲 ET 工業大腦集中學習了 40000 多張樣片,將圖像轉換為機器能讀懂的二進位語言,能讓質檢機器實時、自動判斷電池片的缺陷。並與光伏公司浙江正泰合作,通過「見遠「實現單、多晶電池片電致發光(EL,electroluminescence)缺陷的毫秒級自動判定。V3pednc

在創業公司部分,源自於清華大學 AI 研究院的產學研結合技術公司—瑞萊智慧(RealAI)鎖定工業三個領域:工業視覺檢測、預測性維護、工藝優化,其中已通過計算機視覺的手段,開發光伏面板 EL 缺陷自動檢測算法。V3pednc

中國已是工業製造大國,一直以持續提升製造的品質及效率為目標,瑕疵檢測邁向 AI 化,也可望對國內製造業帶來新的契機。V3pednc

V3pednc
V3pednc

圖:阿里雲 ET 工業大腦的「見遠「,可做瑕疵檢測(來源:阿里雲)V3pednc

傳統 AOI 與 AI 瑕疵檢測

談論瑕疵檢測 AI 之前,有必要先了解 AOI,其核心技術大致有四塊:V3pednc

  • 光學光源:取像元件、感光模組、光學鏡頭、光源照明設備
  • 機構控制:可程序邏輯控制器、PC-Base 控制主機單晶片控制板
  • 影像處理:邊緣偵測、圖像匹配、特徵偵測、攝像頭校正等
  • 分析軟體:統計分析、數據處理

廣義的 AOI 設備是結合光學、訊號處理系統和分析軟體,可應用在生物醫學、指紋比對、品質檢測等方面;狹義的 AOI 多是指應用在工業上,利用高精度攝像頭拍攝產線上的產品,查看是否有瑕疵。V3pednc

不過,以往的 AOI 檢測常見幾個遭詬病的問題,首先是誤報率(False Alarm)過高,行業人士對 DeepTech 表示,目前 PCB 瑕疵檢測設備的誤判率甚至高達 5 成,需再透過大量人力搭配後端驗證修復站(VRS,Verify Repair Station),將 PCB 圖像放大數百倍顯示在屏幕上讓操作人員確認。而往往造成設備誤報的原因還不少,包括產品色差不同、環境光源、算法能力、攝像頭等級等。V3pednc

同時,各行業遇到的檢測瓶頸也不同,像是 PCB 遇到的瓶頸主要在「終檢站」;晶圓生產則是在「黃光站」,想要解決這些問題,非常需要與行業專業知識(domain knowhow)深度配合。V3pednc

其次,傳統的 AOI、AVI 設備通常適用於檢查二維平面結構的產品,所以這也是為什麼 PCB、面板行業導入的比例很高,後續有部分 AOI 業者開始推出三維檢測,但系統檢測的時間拉長。此外,AOI 設備價格相對昂貴等也是一個問題。V3pednc

對比傳統模式,AI 瑕疵檢測有三大優勢:第一也是最重要的是準確率提升,當誤判率下降後,就不用像過去一樣僱用許多人力來進行二次確認。第二則是檢測速度變快,而且可分類缺陷,舉例來說,半導體檢測設備多是偵測瑕疵,鮮少將其分類,但不同瑕疵類別產線會產生不同程度的嚴重性,尤其是 Defect Type 1 為極重大瑕疵,一旦發生就要停機檢查,時間可能長達 2~3 天,影響產能,目前半導體檢測廠仍是高度倚賴人工分類瑕疵,通過 AI 有助於降低瑕疵分類的時間。第三則是後續可以進一步診斷瑕疵出現的原因,但此部分必須跟生產機臺數據串接,屬於較長期的發展方向。V3pednc

V3pednc

圖:PCB 行業使用 AI 執行瑕疵檢測(來源:臺灣工研院)V3pednc

痛點明確,電子行業陸續導入

訓練一個檢測產品瑕疵的 AI,做法像是使用計算機視覺+深度學習,從原始圖像中提取感興趣區域(ROI),這會經過多個處理程序包括圖像的灰度、型態轉化如腐蝕(eroding)、膨脹(dilating)等,最後勾勒出 ROI 區域,並利用深度學習算法如 CNN,在 ROI 區域偵測瑕疵。數據則包括眾多有標記出缺陷的獨特圖像、以及標記為正常產品的圖像,來進行監督式學習。也有人使用端到端的深度學習架構,以深度學習來預測 ROI,而非計算機視覺。使用帶有標註的數據集來訓練可預測 ROI 的架構,不過標註的數據集必須明確且足夠廣泛。V3pednc

適用於 AI 檢測產品瑕疵的製造行業其實非常廣,包括食品、金屬部件、汽車金屬軸件、電子業等,電子業已經有不少企業導入,像是臺灣知名的 DRAM 大廠就導入了臺灣工研院開發的 AI 檢測方案。V3pednc

另外,印刷電路板業者欣興電子不久前也表示,已經在生產線導入 AI 進行瑕疵檢測,並且產品檢測效率提升了 70%。欣興電子指出,過去生產線採用 AVI 設備檢測瑕疵,但檢測的結果常受到產品色差、高度等因素影響,還得加派 11~15% 的人力來復檢。目前他們結合了深度學習和 AVI 設備,原本所有產品都需人工復檢,現在只剩其中 30% 需再次人工檢查,大幅提高了效率。V3pednc

而國內的 RealAI 則是鎖定光伏行業,他們開發光伏面板 EL 缺陷自動檢測算法,通過計算機視覺的手段,針對太陽能光伏面板的多種缺陷進行自動檢測,替代人工視檢過程。V3pednc

RealAI CEO 田天在接受 DeepTech 採訪時表示,這一問題的難點主要在於多晶太陽能電池板的 EL 圖像本身存在晶界等花紋,對缺陷識別產生幹擾。同時,不僅缺陷的種類較多,同一種缺陷的形態也變化多端,RealAI 通過使用自主研發的缺陷檢測模型,並引入相關領域知識,開發出 EL 缺陷自動檢測算法,已經在多家光伏組件頭部製造廠商試用。V3pednc

V3pednc

圖:RealAI 重點關注無監督、半監督學習、小樣本機器學習等場景(來源:RealAI 網站)V3pednc

2019 年將是 AI 快速落地工業製造領域的一年

先前 AI 落地安防、新零售、醫療等的討論較多,但其實在工業上也可發揮很大的效用,目前哪些領域應用的比較多,或是企業接受度較高?田天指出,目前在「缺陷檢測」和「預測性維護」兩大方面客戶接受度和需求較高,主要是因為該領域為客戶痛點,能直接為客戶節省大量的費用。預測性維護也有利於避免重大事故,對於安全製造和安全生產至關重要。V3pednc

對於 2019 年人工智慧在工業製造領域的發展,他認為將是快速發展以及各種技術落地的一年,主要來到了三方面時機點的良好交會:首先是已積累大量算法及行業示範效應,過去 10 年間,AI 領域開發了大量優秀算法,為實際應用儲備了大量的工具。近年來,人工智慧開始大規模應用於金融和網際網路等領域,起到了較好的示範效應。V3pednc

同時,經過此前工業數位化轉型,目前工業領域中已經廣泛使用傳感器等設備,且積累了大量的數據,為人工智慧應用提供了堅實的基礎。V3pednc

再來就是政策方面,國家快速推進工業網際網路的發展,並鼓勵企業進行智能化轉型。隨著社會對人工智慧的逐漸熟悉與接受,工業領域的大量企業開始尋求使用人工智慧深度結合領域知識,切實解決領域內的問題。V3pednc

因此,在人工智慧具有較高的社會接受度和豐富的技術儲備;工業領域具有大量的數據積累,且普及應用傳感器;國家層面在政策上大力支持,他看好 2019 年都會是人工智慧技術在工業製造領域中快速發展與落地的一年。V3pednc

缺少數據的工業製造領域,邁向非監督學習 AI

除了行業需求外,在技術方面則有一個非常值得關注的發展趨勢,也就是非監督式學習也逐漸走進工業領域。這一波的 AI 浪潮始於視覺任務展現了很大的進展,通過標註數據來訓練出識別、分類的 AI,就像前述的 AI 瑕疵檢測,同樣利用有標註瑕疵的圖像數據來訓練,不過,瑕疵數據量是否收集足夠就成了挑戰。另外,如果出現不曾被標註訓練過的瑕疵,系統是否能發現,也是一個問題。V3pednc

這也就是 RealAI 發展無監督學習 AI 的原因,田天說,「在工業應用領域,收集高質量訓練數據的過程往往成本高昂,且耗費時間,如果採用無監督或者半監督的學習方法,就能有效降低訓練數據需求,針對碎片化的工業視覺檢測場景具有更廣的應用前景」。在沒有訓練數據時,可以考慮採用異常檢測、或者變化檢測等方法,讓機器學會什麼是正常的數據,進而在出現異常數據或者變化時能夠做出準確判斷。V3pednc

比如,RealAI 自研的無監督算法就成功運用於石油管線故障檢測問題。在這一問題中,信號數據噪音大,且沒有標註,他們利用無監督算法,成功預測出存在缺陷的管線位置,並且已交付使用。此外,也利用無監督學習方法解決了捲菸機和包裝機預測性維護問題。「在許多缺少或沒有訓練數據的領域,無監督學習是唯一可用的選擇,」他說。V3pednc

(來源:DeepTech深科技)V3pednc

相關焦點

  • 【專利解密】「吹毛求疵」 天準科技太陽能光伏矽片瑕疵檢測方案
    【嘉德點評】天準科技發明的基於機器視覺以及深度學習的太陽能光伏矽片瑕疵檢測系統,可以通過深度學習技術自動統計矽片瑕疵特徵,且當產品更換後,算法無需重新耗費人力開發,能大幅提高產品瑕疵檢測的準確性和識別率。
  • 「專利解密」「吹毛求疵」 天準科技太陽能光伏矽片瑕疵檢測方案
    【嘉德點評】天準科技發明的基於機器視覺以及深度學習的太陽能光伏矽片瑕疵檢測系統,可以通過深度學習技術自動統計矽片瑕疵特徵,且當產品更換後,算法無需重新耗費人力開發,能大幅提高產品瑕疵檢測的準確性和識別率。
  • 基於APFC晶片控制的光伏併網逆變器研究
    摘要:提出一種基於有源功率因數校正(APFC)晶片控制的小功率光伏併網逆變器方案。該逆變器包括直流變換環節和逆變環節。其中直流變換環節採用APFC晶片控制將光伏電池板的直流低電壓變換成正弦雙半波的直流電,逆變環節採用工頻全橋逆變電路將正弦雙半波電流變換為交變電流注入電網。新方案中併網逆變器的併網控制採用APFC晶片實現,而實時控制要求低的最大功率點跟蹤(MPPT)、孤島保護可採用低價的單片機實現。新方案具有成本低、開發和電流採樣容易等優點。通過一臺300W的樣機證明了系統方案是正確有效的。
  • 如何畫雙層pcb板_雙層pcb板布線規則(操作技巧與案例分析)
    雙層pcb,意思是在一塊pcb板子的頂層和底層都畫導線。雙面板解決了單面板中因為布線交錯的難點(可以通過孔導通到另一面),即正反兩面都有布線,元器件可以焊接在正面,也可以焊接在反面,雙層線路板這種電路板的兩面都有元器件和布線,不容質疑,設計雙層PCB板的難度要高更多,下面我們來分析下雙層pcb板布線規則並分享給大家如何畫雙層pcb板。
  • comma.ai創始人:特斯拉應出售自動駕駛晶片 與英偉達形成競爭
    【TechWeb】10月28日消息,據國外媒體報導,自動駕駛技術研發商comma.ai的創始人喬治·霍茨(George Hotz)認為,電動汽車製造商特斯拉應該出售其自動駕駛晶片,與半導體廠商英偉達形成競爭。
  • 如何設計一個可生產製造,作用安全可靠的pcb線路板
    打開APP 如何設計一個可生產製造,作用安全可靠的pcb線路板 YeLongCu 發表於 2020-11-27 11:52:55
  • 為增強AI晶片實力,英特爾又收購了一個7個人的初創公司Vertex.ai
    雷鋒網消息,為了進一步增強在人工智慧領域的競爭力,英特爾又收購了一家AI初創公司Vertex.ai,不過交易的金額並未透露,但英特爾確認了此項交易,整個團隊包括創始人都將加入英特爾的人工智慧產品事業部。
  • AI加持、最優LCOE 華為解鎖智能光伏和AI人工智慧領域新技能
    這是第十三屆國際太陽能光伏大會(SNEC)華為智能光伏E6館上的一幕!智能時代,AI作為一種新的通用目的技術(GPT),正在為各行各業創造價值2019SNEC,華為攜智能光伏6.0最優LCOE解決方案、分布式及戶用智能光伏解決方案、扶貧智能光伏解決方案、智能光伏管理系統等全場景產品和解決方案精彩亮相,全方位展示了華為在智能光伏領域的最新實踐成果和在AI人工智慧方面的創新探索。
  • 解密北鬥「成長之路」:放大2萬倍查找晶片瑕疵
    當一款晶片放大兩萬倍,北鬥人看見了怎樣的瑕疵?北鬥系統服務全球的背後,又經歷了怎樣的波折和驚險時刻?《新聞調查》記者來到北鬥衛星的主要研製單位中國空間技術研究院,帶你「解密」北鬥。解密北鬥「成長之路」,這些瞬間很硬核。
  • 解密北鬥「成長之路」:放大2萬倍查找晶片瑕疵
    當一款晶片放大兩萬倍,北鬥人看見了怎樣的瑕疵?北鬥系統服務全球的背後,又經歷了怎樣的波折和驚險時刻?《新聞調查》記者來到北鬥衛星的主要研製單位中國空間技術研究院,帶你「解密」北鬥。解密一次苛刻的技術篩查:放大2萬倍查找晶片瑕疵,嚴把質量關提高國產化率任何技術的創新和實現都離不開硬體的支持
  • 一文看懂鋁基板和pcb板的區別
    打開APP 一文看懂鋁基板和pcb板的區別 發表於 2019-05-13 11:18:06   按照線路板層數可分為單面板、雙面板、四層板、六層板以及其他多層線路板。由於印刷電路板並非一般終端產品,因此在名稱的定義上略為混亂,例如:個人電腦用的母板,稱為主板,而不能直接稱為電路板,雖然主機板中有電路板的存在,但是並不相同,因此評估產業時兩者有關卻不能說相同。再譬如:因為有集成電路零件裝載在電路板上,因而新聞媒體稱他為IC板,但實質上他也不等同於印刷電路板。
  • 如何在集群中高效地部署和使用 AI 晶片? | 分享總結
    視頻回放:http://www.mooc.ai/open/course/479周鵬程,Thinker (AI 晶片) 團隊深度學習平臺負責人,曾就職於阿里巴巴技術保障事業部,擔任算法工程師;清華大學微電子碩士,主要研究方向:面向可重構晶片的編譯器後端優化,指令級並行,高並發編程模型以及分布式計算。
  • 《地心引力》遭理科生挑刺:男主角之死有違常識
    《地心引力》遭理科生挑刺:男主角之死有違常識   影片在3D視效方面的成就被認為會跟《阿凡達》一樣載入電影史冊,它完美地將CG特效和真人拍攝相結合,毫無瑕疵,3D鼻祖卡梅隆都盛讚該片:「我驚呆了,被打倒了。我覺得這是迄今為止最好的太空電影。」影片讓觀眾最震撼的是用3D技術呈現出來的令人畏懼卻又絕美驚豔的浩瀚太空,無論是遙望中的蔚藍色地球還是太空中看到的日出,抑或是桑德拉·布洛克在黑暗無盡的太空中旋轉,都有震撼人心之感。
  • pcb走線交叉怎麼辦
    打開APP pcb走線交叉怎麼辦 陳翠 發表於 2019-05-10 16:20:38   pcb走線交叉怎麼辦   1、最快最簡單的方法是採用雙面布線的雙面板。
  • 四川:萬元懸賞"數學論文"挑刺人
    2003-09-10 16:31:18 | 來源:四川在線   南充退休教師自稱找到了「費爾馬大定理」的初等方法證明——懸賞「數學論文」挑刺人
  • 年中盤點|2020最炙手可熱的10家AI晶片初創公司
    4、GroqCEO:Jonathan RossGroq表示,它的Tensor Streaming Processor(TSP)處理器可提供「無與倫比的敏捷性」,避免了傳統GPU需要在最高響應速度和最高性能之間折衷的問題。
  • 句子長得「讓人斷氣」 中小學語文教材部分內容存在瑕疵
    -中小學語文教材部分內容存在瑕疵,我市一些教師、家長給予挑刺  -教育專家稱教材總體是適合學生的,我們要尊重教材但不要盲從「我得給教材挑挑刺!」吳先生忍不住跟朋友吐槽。無獨有偶,另一名家長李女士也表示,她為了幫助兒子記住這句話,也費了很大的勁。  教材是根據教學大綱和實際需要,為師生教學應用而專門編選的材料。不少老師、家長卻發現,即便是一些權威教材,也存在一些瑕疵。
  • 光矛系列添新員 GTI公司發布新一代AI晶片
    美國當地時間2018年10月22日,全球領先的AI晶片初創公司Gyrfalcon Technology, Inc.(GTI) 公司發布新一代產品「光矛處理器2803」,該款晶片側重解決數據中心與雲計算系統中普遍存在的高能耗與低效率問題,GTI公司為此推出配置有多顆2803晶片的G.A.I.NTM系列加速卡,可裝配在數據中心與雲計算系統之中,顯著提升運營效率與經濟效益,相比市場上的主流方案提升十倍以上。  隨著人工智慧產業的快速發展,數據中心與雲計算業者紛紛重新思考如何升級硬體系統以應對行業變化。
  • 華為提出新價值主張:AI加持 1500V智能光伏使能平價上網
    10月20日,2018首屆中國光伏產業領跑論壇及頒獎盛典在江蘇泗洪隆重啟幕。在一期總規模500MW的泗洪領跑者基地中,華為智能光伏份額360MW,佔比72%。華為在該盛會上榮獲了「2018光伏產業領跑企業」大獎,充分體現了客戶和合作夥伴對華為智能光伏的認可。
  • 順易捷科技pcb電路板質量如何判斷
    隨著信息技術的發展,對PCB電路板的需求也是越來越大,同時對元器件的層數、重量、精密度、材料、顏色、可靠性等要求越來越高,這時候選擇質量可靠的pcb電路板廠家就非常重要了,那麼順易捷科技pcb電路板質量怎麼樣呢?下面我們先看看如何判斷pcb電路板的質量。