基于陰影重建形狀的視覺技術(shù):一種重要的圖像形狀提取技術(shù)及其應(yīng)用
發(fā)布時間:2020-06-18 來源:Steve Zhu, Teledyne DALSA 集團(tuán) 責(zé)任編輯:wenwei
【導(dǎo)讀】自動化視覺檢測已經(jīng)廣泛應(yīng)用于現(xiàn)今的生產(chǎn)環(huán)境的各個領(lǐng)域,從半導(dǎo)體、電子、食品和飲料、醫(yī)藥包裝、汽車制造以及其它不同行業(yè)。而視覺檢測的應(yīng)用可分類為測量、有/無檢測、機(jī)器人導(dǎo)航、瑕疵檢測、一維或二維碼識別,以及光學(xué)文字識別(OCR)閱讀等等。常規(guī)的 2D 算法通常擅長處理某些特征清晰且定義明確的應(yīng)用,因此檢測更加可靠。 換句話說,目標(biāo)特征必須穩(wěn)定并且清晰一致地呈現(xiàn),檢測和識別才會比較可靠。
不過就如人生一樣,視覺檢測時常面臨挑戰(zhàn)和困境,譬如一些表面帶有天然的紋理或高度反光的物體;再譬如,一些部件經(jīng)過打磨或沖壓等制造過程,產(chǎn)生了彎曲或帶紋理的表面;還有一些物件帶有浮雕圖案或凹凸不平特征,例如是沖壓或雕刻標(biāo)記,這些都會為檢測帶來困難。傳統(tǒng)的二維算法和預(yù)處理工具往 往不能可靠的解決這些問題?;陉幱爸亟ㄐ螤?Shape from Shading)技術(shù)則是一種經(jīng)過驗(yàn)證的更可靠方法,能夠應(yīng)付這些復(fù)雜的檢測任務(wù)。
本文中一下兩個應(yīng)用案例,顯示陰影重建形狀(SFS)技術(shù)如何提高目標(biāo)物體的反差并盡可能地抑制背景噪聲,使得更容易地檢測出缺陷并成功讀取字符。
上圖:原圖像;中圖:陰影重建形狀技術(shù)處理后的圖像; 下圖:利用Teledyne DALSA Sherlock 軟件的陰影重建形狀技術(shù)處理后的圖像
陰影重建形狀技術(shù)的廣泛應(yīng)用
下面兩個例子顯示 SFS 陰影重建形狀技術(shù)的應(yīng)用如何解決一些傳統(tǒng)二維算法和預(yù)處理器難于處理的情況。在第一個案例中,制造商試圖檢測瓷磚表面的裂縫或劃痕??墒怯捎诖纱u表面帶有復(fù)雜的紋理背景,使得一般的照明技術(shù)和常規(guī)的二維預(yù)處理器和算法很難及時檢測到異常,因?yàn)檫@些缺陷在標(biāo)準(zhǔn)成像中根本無法察覺。利用 SFS 技術(shù),凹陷、裂縫和刮痕都能夠被輕易從背景中分離,分辨及被檢測出來。
在上面的示例中,可以看到字體和圖案是以凸壓方式印在名片上。 如第一張圖片所示,在文首的圖片中,在名片上的壓印字體其實(shí)是很難用肉眼來閱讀的。雖然低角度暗場光源會有幫助,但還是不夠強(qiáng)大和穩(wěn)定。利用 SFS 配合多角度多重光源,可實(shí)現(xiàn)具有更高反差和更出色的合成圖像。圖像經(jīng)處理后,名片上的所有字體均清晰顯示 (如上面第二張圖片所示),以便于標(biāo)準(zhǔn)光學(xué)文字辨識算法查驗(yàn)。
什么是 SFS 陰影重建視覺技術(shù)?
陰影重建形狀(Shape from Shading,簡稱 SFS)是一種將物件形狀和它的二維表面紋理分離的技術(shù)。通常,一般來說,它是用于突顯圖像的三維表面紋理信息,即所謂的形狀圖像,并除去高反光部分的眩光,即所謂的紋理圖像。這一技術(shù)的工作原理是利用分段環(huán)燈或獨(dú)立的條形燈并將多個圖像組合為一個圖像而起作用。拍攝過程會從一系列圖像中提取數(shù)據(jù)以揭示以前隱藏的表面特征或缺陷。
相機(jī)會按照環(huán)燈的逆時針轉(zhuǎn)動方向,拍攝出四個不同照明角度的圖像。接著利用陰影重建形狀(SFS)技術(shù)把四個圖像合成,以顯示三維表面結(jié)構(gòu)。上面的四幀圖片顯示出一個帶紋理的瓶蓋在不同照明角度下拍攝出來的影像,以及經(jīng)SFS 算法處理后的合成圖像。
下圖顯示 SFS 技術(shù)的合成和處理過程。
利用多角度多重光源(使用者可編程)擷取的四個影像
Teledyne DALSA Sherlock 軟件里的 SFS 算法可計(jì)算具有 3D 效果的合成圖像,以增強(qiáng)對比度,同時抑制背景噪聲。
形狀圖像
工作原理如下:算法會搜尋從每一照明方向建構(gòu)出來的陰影以及突顯出來的邊緣。每一幀圖像的陰影和邊緣會組合成一個圖像,以展示各部份的高度差異。
這特別有助于偵測刮痕、凹陷、遺失的部件等等。
紋理圖像
該算法還將尋找沒有直接照明的圖像區(qū)域。 然后,它將看起來相同的圖像的所有區(qū)域(即它們沒有眩光)組合到一個沒有眩光的圖像中。 這對于檢查高反射率零件或通過塑料或透明材料覆蓋物或包裹物檢查零件很有用。
如何處理運(yùn)動中目標(biāo)物的檢測
假如部件在檢測過程中處于運(yùn)動狀態(tài),SFS 的嵌入式活動矯正機(jī)制可以處理同一部件在每一圖像擷取時位于不同位置的情況。再通過額外的一副圖像,即所謂的搜尋圖像。通過比較第一副圖像和搜尋圖像,算法會找出部件在圖像擷取時的活動模式,從而識別并對齊正確的像素。
磁磚彩色圖像 磁磚單色圖像
經(jīng) SFS 處理的圖像
SFS 陰影重建技術(shù)的優(yōu)勢
這種先進(jìn)的視覺解決方案具有許多獨(dú)特的優(yōu)勢。 通過先進(jìn)軟件算法配合多角度照明,它有助于消除表面背景效果(例如噪音或色彩),并產(chǎn)生聚焦于具有強(qiáng)烈對比度的特征的輸出圖像,以方便檢查。 它特別適合檢查多種材料(例如金屬,塑料,橡膠和陶瓷)的反射表面和粗糙表面是否有瑕疵(例如凹痕,凹槽,裂縫和劃痕),并清晰顯示難以理解的字符。
推薦閱讀:
設(shè)計(jì)電路當(dāng)然要“知己知彼”,開關(guān)穩(wěn)壓器拓?fù)涞脑肼曁匦源笃鸬?/a>
特別推薦
- 復(fù)雜的RF PCB焊接該如何確保恰到好處?
- 電源效率測試
- 科技的洪荒之力:可穿戴設(shè)備中的MEMS傳感器 助運(yùn)動員爭金奪銀
- 輕松滿足檢測距離,勞易測新型電感式傳感器IS 200系列
- Aigtek推出ATA-400系列高壓功率放大器
- TDK推出使用壽命更長和熱點(diǎn)溫度更高的全新氮?dú)馓畛淙嘟涣鳛V波電容器
- 博瑞集信推出低噪聲、高增益平坦度、低功耗 | 低噪聲放大器系列
技術(shù)文章更多>>
- 聚焦制造業(yè)企業(yè)貨量旺季“急難愁盼”,跨越速運(yùn)打出紓困“連招”
- 選擇LDO時的主要考慮因素和挑戰(zhàn)
- 兩張圖說清楚共射極放大器為什么需要發(fā)射極電阻
- 授權(quán)代理商貿(mào)澤電子供應(yīng)Toshiba多樣化電子元器件和半導(dǎo)體產(chǎn)品
- 科技的洪荒之力:可穿戴設(shè)備中的MEMS傳感器 助運(yùn)動員爭金奪銀
技術(shù)白皮書下載更多>>
- 車規(guī)與基于V2X的車輛協(xié)同主動避撞技術(shù)展望
- 數(shù)字隔離助力新能源汽車安全隔離的新挑戰(zhàn)
- 汽車模塊拋負(fù)載的解決方案
- 車用連接器的安全創(chuàng)新應(yīng)用
- Melexis Actuators Business Unit
- Position / Current Sensors - Triaxis Hall
熱門搜索
光收發(fā)器
光通訊器件
光纖連接器
軌道交通
國防航空
過流保護(hù)器
過熱保護(hù)
過壓保護(hù)
焊接設(shè)備
焊錫焊膏
恒溫振蕩器
恒壓變壓器
恒壓穩(wěn)壓器
紅外收發(fā)器
紅外線加熱
厚膜電阻
互連技術(shù)
滑動分壓器
滑動開關(guān)
輝曄
混合保護(hù)器
混合動力汽車
混頻器
霍爾傳感器
機(jī)電元件
基創(chuàng)卓越
激光二極管
激光器
計(jì)步器
繼電器