《電子技術應用》
您所在的位置:首頁 > 嵌入式技術 > 設計應用 > 基于機器視覺的鋼軌表面缺陷三維檢測方法
基于機器視覺的鋼軌表面缺陷三維檢測方法
2015年微型機與應用第19期
王時麗,劉桂華
(西南科技大學 信息工程學院,四川 綿陽621010)
摘要: 提出了一種二維視覺與三維視覺相結合的鋼軌表面缺陷檢測方法。該方法通過線陣相機采集二維圖像,由激光掃描儀采集鋼軌深度信息,最后將這兩組數據傳送回主機,用Halcon和VC編寫上層圖像處理軟件,獲得鋼軌表面缺陷的大小、形狀、位置及深度,實現了全面檢測鋼軌表面缺陷。實驗表明,與二維圖像識別,或者與單獨使用三維掃描檢測相比,本系統檢測效果更好。
Abstract:
Key words :

  摘  要: 提出了一種二維視覺三維視覺相結合的鋼軌表面缺陷檢測方法。該方法通過線陣相機采集二維圖像,由激光掃描儀采集鋼軌深度信息,最后將這兩組數據傳送回主機,用Halcon和VC編寫上層圖像處理軟件,獲得鋼軌表面缺陷的大小、形狀、位置及深度,實現了全面檢測鋼軌表面缺陷。實驗表明,與二維圖像識別,或者與單獨使用三維掃描檢測相比,本系統檢測效果更好。

  關鍵詞: 二維視覺;三維視覺;激光掃描儀;鋼軌表面缺陷;Halcon

0 引言

  在我國的交通運輸行業中,鐵路運輸發揮著不可替代的作用。為保證鐵路運輸的安全、快速,除了對鋼軌高平直度、高熱處理強度和高精度的要求外,對鋼軌的表面質量也提出了更為嚴格的要求。而表面缺陷則是衡量鋼軌表面質量的一個重要技術指標,也是保證鐵路運行安全的重要保障。

  近幾年,世界各國加強了對鋼軌表面缺陷檢測的研究,許多發達國家已自行研制出高速軌檢車,如意大利 MERMEC Group公司開發的Rail Profile System(RPS)、澳大利亞 SY00970 軌道掃描試驗車以及俄羅斯的 BFSM 檢測系統等,許多學者對基于機器視覺的表面檢測技術也做了深入的研究工作[1-5]。目前,國內常用的鋼軌表面檢測方法主要有人工目視法、磁場法和電渦流法。但是人工疲勞、環境惡劣等各方面的因素致使檢測受到局限,因此需要研發一個自動檢測系統來協助鐵路部門進行檢測。國內一些學者如葉蘇茹、徐科、王平等人[6-9]已經開始研究將視覺技術應用于鋼軌表面缺陷檢測,并且取得了一定成果[10-14]。

  但是,以上所述的這些表面檢測方法主要針對二維圖像進行識別,無法給出量化的缺陷深度信息,一些細小孔洞等難以用二維圖像識別的方法將其檢測出來。另外,根據大型鋼材生產廠制定的《43 kg/m 75 kg/m鋼軌訂貨技術條件》知,合格的鋼軌表面不應有裂紋,深度超過0.5 mm或者面積超過0.5 mm2的氧化鐵皮或者磨痕、折疊等。因此,本文在這些研究成果和檢測標準的基礎上提出了一種將二維視覺與三維視覺相結合的鋼軌表面檢測系統,該系統能準確檢測出鋼軌缺陷的位置、大小及深度,為鋼軌表面缺陷檢測提供一種成本低、檢測精度高的快速有效新途徑。

1 硬件設計


001.jpg

  設計的硬件平臺系統如圖1所示。該系統主要由數據采集系統、運動控制系統以及計算機處理系統三部分組成。

002.jpg

  整個圖像采集系統如圖2所示。該系統采集的數據主要包括鋼軌表面圖像以及鋼軌表面深度數據。

  1.1 鋼軌表面圖像采集系統

  該子系統作為圖像采集系統的一部分,主要由光源、相機與鏡頭組成,負責采集鋼軌表面二維圖像。

  (1)光源。在計算機視覺系統中,好的光源與照明方案往往是整個系統成敗的關鍵。光源與照明方案的配合應盡可能地突出物體特征參量,使成像質量不受物體位置變化的影響。在綜合考慮鋼軌表面高反光特性、光源照明亮度、均勻度以及幾何形狀等因素后,選用MVLZ公司MVLZ8080-W型號的大功率LED線型光源(條形光源),照明方案采用“低角度前光照明”。

  (2)相機與鏡頭。目前用于視覺系統的相機主要包括線掃描相機和面掃描相機兩類。考慮到鋼軌生產線生產速度為1.5 m/s(5.4 km/h),系統精度設計為±0.2 mm,拍攝視場為300 mm,可推算出相機的參數如下:

  ①CCD分辨率

  橫向方向上的像素單元個數至少為:300/0.2=1 500。因此,可選擇分辨率為2 048像素的相機,實際精度為300/2 048=0.14 mm。

  ②CCD線掃描頻率

  若縱向分辨率為0.2 mm,則可得到線陣CCD的水平掃描頻率:HSF=V/R=5.4/0.2=27 kHz。

  綜上所述,系統選用了Basler公司型號為raL2048-48 gm的線掃描黑白相機。該相機最大行頻48 kHz,分辨率為2 048,鏡頭選擇固定焦距50 mm的C口鏡頭。由于相機本身屬于千兆以太網接口,因此本系統直接通過網線將采集圖像傳輸回計算機而不用圖像采集卡。

  1.2 鋼軌表面深度數據采集系統

  由于基于二維圖像的鋼軌表面檢測方法只能根據缺陷的二維特征進行缺陷識別和分類,忽略(并且也無法得到)了鋼軌缺陷最重要的深度信息,容易漏檢面積較小的凹坑、軋疤等缺陷,因此,本文在二維缺陷識別的基礎上引入激光掃描儀,實現鋼軌表面深度數據的獲取。該激光掃描儀采用LMI的Gocator 2300系列傳感器,z軸精度為0.055~0.200 mm。該設備由已經標定好的相機及激光器組成。在掃描鋼軌前,給定一個基準面,即可精確得到掃描面相對于基準面的精確x,y,z軸數據(單位:mm)。其中x軸表示縱向位置,y表示掃描橫向位置,z表示掃描面與基準面的差值,即深度。

2 系統軟件設計


003.jpg

  本系統軟件部分由計算機完成,整個軟件流程設計如圖3所示。通過處理線陣相機采集的鋼軌踏面圖像得到擬檢測缺陷的面積、位置、長寬比、圓形度等特征,通過激光掃描儀獲得鋼軌踏面的深度數據,經過處理得到各擬檢測缺陷的最大深度h,最后再將這兩組數據進行融合,綜合判斷該鋼軌是否有缺陷,若有則報警并存儲,若無則繼續掃描。

  2.1 鋼軌表面缺陷檢測與特征提取


004.jpg

  表面缺陷檢測與特征提取流程圖如圖4所示。首先,對線陣相機獲得的圖像進行預處理,包括鋼軌區域定位、去噪以及增強;然后進行圖像分割和形態學處理,實現擬缺陷區域提取;最后計算所提取出擬缺陷區域的相關特征值。

  2.1.1 鋼軌區域定位

005.jpg

  攝像機采集的圖像中除了鋼軌表面區域外還包含其他背景區域,去掉無關的背景區域能大幅減少存儲空間和運算時間,能有效提高檢測結果的有效性。通過對采集的圖像進行觀察和分析發現:鋼軌區域相對于圖像背景區域灰度差異明顯,鋼軌所在區域的灰度值比背景所在區域的灰度值高,如圖5(a)所示。對圖5(a)中灰度值進行垂直積分投影,得到圖像的投影曲線如圖5(b)所示。截取投影積分最大的兩個值間的部分得到如圖5(c)所示鋼軌區域。

  2.1.2 圖像分割算法

  為降低噪聲對圖像處理效果的影響,本文首先選用3×3的窗口對圖5(c)進行自適應中值濾波,然后采用迭代閾值法對圖像進行分割,具體步驟如下:

  (1)求出圖像中最小灰度值Zmin和最大灰度值Zmax,令閾值初值T0=(Zmin+Zmax)/2;

  (2)根據閾值Tk將圖像分割成目標和背景兩部分,并分別求出兩區域的像素平均灰度值,記為μ1和μ2;

  (3)求出新閾值為Tk+1=(μ1+μ2)/2,k=1,2,3…;

  (4)重復(2)~(3),直到Tk+1=Tk,結束循環并跳轉至(5);

  (5)此時得到的Tk為最佳閾值,將大于Tk的部分判定為目標,灰度值設為255;將小于Tk的部分判定為背景,灰度值設為0,再對圖像進行二值化操作。

  2.1.3 缺陷區域提取與特征值計算

  通過對形態學處理后的二值圖片從左至右、從上到下遍歷,標記連通區域并計算特征值,實現缺陷區域提取與特征值計算。目前,選用如下特征值對缺陷進行描述:

  (1)區域面積Ai。對一幅圖像,存在圖像區域Ri,Ri中像素點數構成其面積Ai,對一幀圖像,設共有k個這樣的圖像區域,即i=1,2,3,…,k,則該幀圖像總面積A是各區域面積Ai之和:

  EEE`~RXWI94@R%[S{X$%H_Q.png

  其中,(x,y)∈Ri。

  (2)區域圓形度Ci。圓形度又稱為復雜度或分散度,主要反應目標區域Ri的緊湊程度,對于區域面積相同的區域,其區域周長越小,其圓形度越小。圓形度定義為:

  A3K}}1(J_9OF(F`%[@}2VX4.png

  其中,Ai為區域Ri的面積,Pi為區域Ri的周長。

  (3)長寬比r。它是區域最小外接矩形長和寬的比值。利用r可以將細長的物體與圓形或方形的物體區分開來。

  r=LMER/WMER(3)

  其中,MER表示區域最小外接矩形,L表示外接矩形長,W表示外接矩形寬。

  2.2 鋼軌缺陷深度處理

  在用激光掃描儀連續掃描鋼軌前,首先將標定板放于鋼軌踏面,通過掃描儀自帶軟件校正基準面,使標定板所在平面Z0=0。然后讓激光掃描儀掃描一段無缺陷鋼軌,將所得數據求和取平均,得到一行無缺陷的鋼軌表面相對于基準面的數據Z1(單位:mm)。隨后,將Z1與掃描得到的每行數據Z2做差得到]T}873VTCGCP6]KDL2W1H8E.jpgh(缺陷深度),]T}873VTCGCP6]KDL2W1H8E.jpgh即可作為評判鋼軌有無缺陷的指標之一。如果鋼軌無缺陷,那么0≤]T}873VTCGCP6]KDL2W1H8E.jpgh<0.5 mm,反之]T}873VTCGCP6]KDL2W1H8E.jpgh≥0.5 mm。

  2.3 數據融合

  二維視覺能夠明顯地提取裂紋、軋痕、結疤等缺陷,但也容易將小凹坑等缺陷區域判定為非缺陷。利用激光掃描儀獲得的深度數據,可以快捷地判定出深度大于0.5 mm的凹坑等缺陷,但由于受掃描儀本身檢測精度影響,很難檢測出裂紋等平面缺陷。因此,適當地將二維視覺與三維視覺的結果融合起來能大大提高系統的準確度。本文采用“并”操作進行融合,即根據二維圖像中缺陷區域的位置求得每個區域的最大缺陷深度Ri(max)(Ri表示二維圖像中第i個缺陷區域),將缺陷二維特征與三維特征組成一組特征描述向量,共同表示缺陷。

3 實驗結果與分析

006.jpg

007.jpg

  實驗采用的是自主搭建的鋼軌表面缺陷檢測平臺。系統搭建環境為Win7操作系統,編程開發環境為Visual Studio 2012。利用HALCON11.0視覺庫,搭建智能圖像處理軟件系統,實現鋼軌表面缺陷三維檢測。圖6為實驗結果。表1為檢測得到的缺陷特征描述數據。

  本系統在獲取缺陷特征描述向量后,首先判定缺陷最大深度是否大于0.5 mm,如果是則直接報警并存儲該缺陷,否則根據缺陷的幾何特征和形狀特征進行判別。本系統從二維視覺和三維視覺兩方面綜合判斷鋼軌表面缺陷,能有效減少缺陷誤判率和漏檢率。

4 結束語

  本文設計了一個基于機器視覺的鋼軌表面缺陷三維檢測系統,詳細介紹了系統總體設計、 圖像采集成像系統和缺陷檢測算法,基于VC++語言編寫了系統軟件,并對現場采集的鋼軌表面圖像進行了缺陷檢測實驗。實驗結果表明,該系統能夠完成對鋼軌表面缺陷的檢測,并獲取缺陷的深度、面積等特征信息。

  但是,該檢測系統目前還存在許多不足,在檢測速度、精度上仍然有待提高,應進一步改進算法,同時提高系統設計的穩定性,增加缺陷識別模塊,以滿足檢測系統對高速實時處理的更高要求。

參考文獻

  [1] BABENKO P. Visual inspection of railroad tracks[D]. Florida: University of Central Florida Orlando, 2009.

  [2] DEUTSCHL E, GASSER C, NIEL A, et al. Defect detection on rail surfaces by a vision based system[C]. Intelligent Vehicles Symposium, 2004 IEEE. 2004: 507-511.

  [3] HASHMI M F, KESKAR A G. Computer-vision based visual inspection and crack detection of railroad tracks[J]. Recent Advances in Electrical and Computer Engineering, 2014:102-110.

  [4] CHEN L, LIANG Y, WANG K. Inspection of rail surface defect based on machine vision system[C]. Information Science and Engineering (ICISE), 2010 2nd International Conference on. IEEE, 2010: 3793-3796.

  [5] LIU Z, WANG W, ZHANG X, et al. Inspection of rail surface defects based on image processing[C]. Informatics in Control, Automation and Robotics(CAR), 2010 2nd International Asia Conference on. IEEE, 2010: 472-475.

  [6] 葉蘇茹.基于機器視覺的熱態重軌表面缺陷檢測關鍵技術研究[D].重慶:重慶大學,2008.

  [7] 徐科,楊朝霖,周鵬,等.基于激光線光源的L軌表面缺陷三維檢測方法[J].機械工程學報,2010,46(8):1-5.

  [8] 劉澤,王嵬,王平.鋼軌表面缺陷檢測機器視覺系統的設計[J].電子測量與儀器學報,2010,24(11):1012-1017.

  [9] 王海濤,甄理,楊春霞,等.基于計算機視覺的鐵軌表面缺陷檢測系統[J].無損檢測,2011,33(11):38-41.

  [10] 郝曉莉,李斌.基于機器視覺的鋼軌表面損傷檢測算法[J].北京交通大學學報,2015,39(2):28-34.

  [11] 陳濤.熱態重軌表面缺陷在線檢測系統關鍵技術研究[D].重慶:重慶大學,2011.

  [12] 吳祿慎,朱磊,陳華偉.基于線陣CCD相機的軌道圖像采集系統設計[J].鐵道標準設計,2014,58(8):55-59.

  [13] 劉蘊輝,劉鐵,王權良,等.基于圖像處理的鐵軌表面缺陷檢測算法[J].計算機工程,2007,33(11):236-238.

  [14] 張朝勇,蘇真偉,喬麗,等.一種基于LED和線激光的鋼軌表面缺陷檢測系統[J].科學技術與工程,2013,20(36):9877-9880.


此內容為AET網站原創,未經授權禁止轉載。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
欧美日韩精品免费观看视频完整| 国产精品一区二区久久久| 亚洲性感激情| 亚洲精品一区二区三区婷婷月| 欧美中日韩免费视频| 亚洲影音先锋| 亚洲少妇自拍| 中文精品在线| 亚洲视频在线观看网站| 一区二区激情| 亚洲深夜福利在线| 亚洲网站在线看| 亚洲一区二区在线播放| 亚洲性感美女99在线| 亚洲视频免费在线| 亚洲小少妇裸体bbw| 亚洲永久免费| 午夜精品视频一区| 性色av一区二区三区红粉影视| 午夜精品福利一区二区蜜股av| 亚洲男女自偷自拍| 午夜精品久久久久久99热软件| 亚洲免费在线视频| 欧美一区二区三区成人| 欧美一区二区三区播放老司机| 欧美一区二区精品在线| 欧美一区二区网站| 亚洲黄色毛片| 亚洲欧洲一区二区在线观看| 亚洲精品乱码久久久久久| 亚洲免费观看高清完整版在线观看熊| 亚洲伦理久久| 亚洲一级高清| 欧美中文字幕视频| 久久久国产精品一区二区中文| 久久久精品2019中文字幕神马| 久久人人超碰| 欧美国产丝袜视频| 欧美日韩高清不卡| 国产精品久久久久免费a∨大胸 | 99精品欧美一区| 亚洲午夜av在线| 亚洲免费在线看| 久久精品99无色码中文字幕| 亚洲欧洲一区二区三区在线观看| 99综合在线| 欧美一区二区三区在线观看视频| 久久综合伊人77777尤物| 欧美区一区二| 国产精品日韩精品欧美在线| 国内精品一区二区| 亚洲日本在线视频观看| 亚洲亚洲精品三区日韩精品在线视频| 性欧美video另类hd性玩具| 亚洲人成网站在线观看播放| 亚洲视频1区| 久久久五月天| 欧美午夜www高清视频| 国产一区二区三区电影在线观看| 亚洲高清影视| 亚洲与欧洲av电影| 亚洲日本成人女熟在线观看| 亚洲一区二区三区高清不卡| 久久久久久精| 欧美视频在线不卡| 韩曰欧美视频免费观看| av成人免费| 亚洲成色777777女色窝| 亚洲私人黄色宅男| 久久婷婷色综合| 欧美视频福利| 亚洲第一福利在线观看| 亚洲婷婷综合久久一本伊一区| 亚洲国产精品久久| 午夜视黄欧洲亚洲| 欧美国产1区2区| 国产欧美视频一区二区| 亚洲精品极品| 欧美一区三区二区在线观看| 99国产精品国产精品毛片| 久久精品国产视频| 欧美视频中文在线看| 精品成人在线| 亚洲综合日韩中文字幕v在线| 亚洲精品中文字幕女同| 久久aⅴ国产欧美74aaa| 欧美日韩综合精品| 亚洲第一中文字幕在线观看| 性欧美video另类hd性玩具| 亚洲午夜电影| 欧美大成色www永久网站婷| 国产亚洲精久久久久久| 亚洲最新在线视频| 亚洲美女视频在线免费观看| 久久久久久亚洲综合影院红桃| 国产精品a久久久久| 亚洲国产精品va在线观看黑人| 午夜精品在线观看| 亚洲一区二区三区在线视频| 欧美成人乱码一区二区三区| 国产欧美一区二区三区在线老狼| 一区二区三区色| 99在线精品视频在线观看| 免费视频久久| 韩国av一区二区三区在线观看| 亚洲欧美精品suv| 亚洲性色视频| 欧美女同在线视频| 在线播放豆国产99亚洲| 欧美影院在线播放| 欧美一区二区三区四区在线观看| 欧美亚洲成人精品| 99成人在线| 日韩一二三区视频| 欧美—级高清免费播放| 精品69视频一区二区三区| 欧美在线网站| 久久美女艺术照精彩视频福利播放| 国产精品亚洲综合一区在线观看| 夜夜嗨av色一区二区不卡| 一区二区三区视频免费在线观看| 欧美福利精品| 亚洲国产日韩在线一区模特| 亚洲国内自拍| 欧美成人a视频| 亚洲国产成人午夜在线一区| 亚洲激情国产精品| 久久青青草原一区二区| 狠狠色狠狠色综合| 久久国产日本精品| 久久在线播放| 亚洲国产小视频在线观看| 日韩午夜在线电影| 欧美日韩视频专区在线播放| 亚洲精品在线三区| 一区二区三区四区五区在线 | 精品二区视频| 亚洲欧洲视频| 欧美日韩免费观看中文| 99日韩精品| 亚洲欧美精品一区| 国产毛片久久| 久久精品视频在线| 欧美jizzhd精品欧美巨大免费| 亚洲国产欧美一区二区三区丁香婷| 亚洲精品视频一区二区三区| 欧美区视频在线观看| 亚洲桃花岛网站| 久久精品国产99精品国产亚洲性色 | 一本大道久久a久久综合婷婷| 欧美日韩成人在线视频| 在线一区二区视频| 亚洲美女精品久久| 一区二区三区日韩在线观看| 国产精品国产成人国产三级| 亚洲欧美日韩在线播放| 麻豆国产精品777777在线 | 99www免费人成精品| 欧美午夜视频一区二区| 性欧美videos另类喷潮| 美女成人午夜| 99精品视频免费观看| 欧美一区二区高清| 在线观看欧美成人| 亚洲一区在线看| 国产在线不卡精品| 日韩一级精品视频在线观看| 国产精品任我爽爆在线播放| 久久丁香综合五月国产三级网站| 欧美搞黄网站| 亚洲欧美国产视频| 欧美插天视频在线播放| 亚洲性感美女99在线| 美女脱光内衣内裤视频久久影院| 亚洲精品在线观看视频| 久久精品国产99| 日韩午夜免费| 久久久久久高潮国产精品视| 亚洲精品视频在线| 欧美在线视频观看免费网站| 亚洲国产视频一区二区| 午夜精品福利视频| 在线电影国产精品| 欧美一进一出视频| 亚洲国产片色| 久久黄色网页| 亚洲精品免费看| 久久久久久日产精品| 一本色道久久88综合日韩精品 | 激情校园亚洲| 亚洲男女毛片无遮挡| 亚洲电影免费观看高清完整版在线观看| 一区二区三区免费看| 伊人成人在线视频| 午夜日韩视频| 日韩视频国产视频| 麻豆久久婷婷| 亚洲欧美在线免费观看| 欧美日韩www| 久久精品一二三区|