實(shí)訓(xùn)一機(jī)器視覺(jué)技術(shù)

1、實(shí)訓(xùn)一 機(jī)器視覺(jué)技術(shù)（一） 機(jī) 器視覺(jué)技術(shù)1. 目標(biāo)-圖像攝取裝置（CMOS和CCD）t圖像信號(hào)-圖像處理系 統(tǒng)t數(shù)字化信號(hào)2. 機(jī)器視覺(jué)系統(tǒng)組成部分：光源、鏡頭、相機(jī)、圖像處理單元、圖 象處理軟件、監(jiān)視器、輸入 / 輸出控制單元。3. 特點(diǎn)：提高生產(chǎn)的柔性和自動(dòng)化程度。4. 應(yīng)用：生產(chǎn)流水線的檢測(cè)系統(tǒng)（汽車(chē)零件、紙幣印刷質(zhì)量） 、智能 交通管理系統(tǒng)、金相分析、醫(yī)療圖象分析、無(wú)人機(jī)、機(jī)器人等。（二） 機(jī)器視覺(jué)實(shí)訓(xùn)系統(tǒng)大恒DHLAB-BASE-PY-AF平移式機(jī)器視覺(jué)教學(xué)實(shí)驗(yàn)平臺(tái)組成部分：相機(jī)安裝模塊、光源安裝模塊、平臺(tái)方形載板、運(yùn)動(dòng) 控制面板由組成部分可推測(cè)，在機(jī)器視覺(jué)系統(tǒng)識(shí)別物體時(shí)， 相機(jī)的

2、焦距、光源的 種類、光圈的大小、曝光時(shí)間的長(zhǎng)短、載板移動(dòng)速度的大小 都將會(huì)對(duì) 獲取圖像產(chǎn)生不同的影響。平臺(tái)：速度可調(diào)；手動(dòng)或自動(dòng)運(yùn)動(dòng)模式； 攝像頭：緊湊型數(shù)字?jǐn)z像機(jī)感光元件：1/1.8” CCD分辨率為1628（ H） x 1236（ V）；像素 尺寸 4.4um x 4.4um。三） 實(shí)訓(xùn)內(nèi)容1】一維條碼檢測(cè)1. 條形碼（barcode）是將寬度不等的多個(gè)黑條和空白，按照一定的編 碼規(guī)則排列，用以表達(dá)一組信息的圖形標(biāo)識(shí)符，在商品流通、圖書(shū)管 理、郵政管理、銀行系統(tǒng)等許多領(lǐng)域都得到廣泛的應(yīng)用。2. 攝像機(jī)位置離檢測(cè)平面大概47cm,光源離檢測(cè)平面約36cm。3. 實(shí)驗(yàn)步驟如下： 放置條形碼在載

3、物平臺(tái)上，使其處于鏡頭正下方； 調(diào)整焦距、改變光圈大小，使物體清晰，對(duì)比度高、明暗適中； 利用計(jì)算機(jī)軟件控制相機(jī)對(duì)物體成像； 通過(guò)改變曝光量、增益、光源、載物臺(tái)移動(dòng)速度，觀察成像結(jié)果并 加以比較。 結(jié)果如下：條形碼 A不開(kāi)光圈、無(wú)速度口冃、/曰.曝光量增益識(shí)別結(jié)果10000沒(méi)有圖像25000不能識(shí)別600000正確識(shí)別600005正確識(shí)別600006.4錯(cuò)誤識(shí)別600007沒(méi)有圖像條形碼 B不開(kāi)光圈、無(wú)速度仃耳、/曰.曝光量增益識(shí)別結(jié)果600002沒(méi)有圖像600006.4正確識(shí)別6000020錯(cuò)誤識(shí)別350006.4不能識(shí)別400006.4正確識(shí)別開(kāi)光圈仃耳、/曰.曝光量增益識(shí)別結(jié)果60000

4、6.4沒(méi)有圖像20006.4正確識(shí)別速度仃耳、/曰.曝光量增益識(shí)別結(jié)果小600006.4正確識(shí)別中600006.4錯(cuò)誤識(shí)別大600006.4錯(cuò)誤識(shí)別 部分截圖wtiic3me |«dhw 3mrn-izlmvtj9e lues刼iFdfiHmIIWMfa liram事ERtr»pU*MM-!EW*f«W*jwtmrSanflHgiW4b8 也> undoes|UZ*JW gimg17iSA* ImSS 3KM I -IOPMM4X«B«MPftJ叭JI jW MMMH龍 尿 習(xí)titH |r«WT 7«S®t

5、tjJiMMUBkl f!K wt«aM! *y«r.Ml”.3*1ImmI Ituwas ID?lJex F 3dH：l |imptrni h-* xlrwii931K -dIKHCEX g 5*rtfla.kTt£LlH A" jJST審iqjl郴，J*d>niwl*. am Jnd!rJIIStJ«kv:|53HY1X-P*wr亶起植g|jIAnv4|袒訂WIWH二Ap2.-i3DiK»C- 2KEi1U riS-iXd k<util牡曲l&rt直J® ±naft| Elipj*a壬無(wú)nm

6、lWWfrD4EHAQqLaaw h 思考題a.想要調(diào)整平臺(tái)移動(dòng)速度，可以使用平移平臺(tái)控制面板速度調(diào)整部分，打開(kāi)速度調(diào)整按鈕，旋轉(zhuǎn)旋鈕，控制速度b.更換其他條形碼，必須再次經(jīng)過(guò)調(diào)焦、找到合適位置、適合曝光量、適合增益，才能夠正確識(shí)別。否則會(huì)出現(xiàn)錯(cuò)誤識(shí)別或不能成 像的結(jié)果。【2】二維碼檢測(cè)1. 二維碼為黑白相間、粗細(xì)不同的點(diǎn)陣圖形，通過(guò)大大小小不同的 黑白的點(diǎn)來(lái)存儲(chǔ)信息。2. 檢測(cè)系統(tǒng)、實(shí)驗(yàn)步驟同【1】3. 結(jié)果：曝光量很小時(shí)，系統(tǒng)也能夠識(shí)別；增益數(shù)在實(shí)驗(yàn)過(guò)程中均大于3。Ur*】' r#in*mu；毎2HU.7ntx*叭三BF *4»|1M1 E|iF4«r1 Ck.

7、 i K* MItt悝L|kHMif4. 討論加光源對(duì)識(shí)別結(jié)果的影響:未補(bǔ)光*MH4i««ILam *r*nUJ4A«|.書(shū)far3Hn_3m理nsfNriTM補(bǔ)光JB ±nn*dflWj科 th. 比由即在此實(shí)驗(yàn)中，光源的補(bǔ)充與否并沒(méi)能直接影響識(shí)別精度。 只要 在實(shí)驗(yàn)過(guò)程中，注意到曝光量、增益、光圈大小、光源補(bǔ)否之前相互 協(xié)調(diào)，就能夠使系統(tǒng)精準(zhǔn)檢測(cè)識(shí)別到二維碼的內(nèi)含信息。討論改變觸發(fā)模式對(duì)識(shí)別結(jié)果的影響：平移平臺(tái)在移動(dòng)的過(guò)程中，能夠受到觸發(fā)模式的控制。當(dāng)改動(dòng)觸 發(fā)模式為“ LineO”時(shí)，平臺(tái)在移動(dòng)經(jīng)過(guò)磁鐵標(biāo)定點(diǎn)時(shí)，系統(tǒng)相機(jī)自 動(dòng)拍照并只在此時(shí)拍照。此

8、時(shí)拍照得到的圖像較為清晰，識(shí)別準(zhǔn)確度提高W . .1- -循廉一噸V?6曰 口arna GmLpl 匚環(huán),L tdNinrr 忖古心le ircki口 f蟲(chóng)塑大恒圖像柑已兵比|：|圈咆丘琳土咼臬旦>. 二臺(tái)臭悅剖 G*曬 Rg9筋磺i*4)pra-g-1甬廬RtlSMjf |鎰戲Fq制g 汎3.0- 16X1MD. t p- pv jo 晦(0 t：dMd；由fsliApi AiKtKB Qp MH?也対IBWu4flasilTftif-JElfE-lDt«<"3-ffa DLBugW tSHB4IKHIzH»t3盂*5*(i 占兩3ih(v|亠rIW

9、"畑FHuh中肓mrramjmr銘h 盲 旨 rfeirqai豐上創(chuàng)IIwirtli-】口理刨 5.思考題 a.其他二維碼即系統(tǒng)能夠識(shí)別如微信、系統(tǒng)自動(dòng)生成的一些二維碼。只是在進(jìn)行識(shí)別前，需要記得調(diào)焦、調(diào)整曝光量等數(shù)據(jù)，使系統(tǒng)能夠成清晰的像，只有這樣，才能精準(zhǔn)識(shí)別 b.編寫(xiě)識(shí)別指定二維碼的Halcon程序。在經(jīng)過(guò)學(xué)習(xí)原有二維碼識(shí)別的程序代碼后，分析得知只需將過(guò)程中的“識(shí)別”語(yǔ)句改為相應(yīng)的新二維碼信息，既可以實(shí)現(xiàn)識(shí)別功能。語(yǔ)句改為：M1:= wan gxiaoha n識(shí)別功能實(shí)現(xiàn)截圖如下：腫 十 丹卍世 gi-r| 塾 £、' « JTIAIX 才 I&qu

10、ot;,皿-JtLL jJL l*- ti =a”- eka' dac 杓血b#<unw匕占占"也4NB« 目稱 !(*性回電V »kkBkiU 十"-工幗亠S1 聞 LI j *.1亠J!出居*=mtr_data_cntE_2f .wrieJ <»?-£ KE ZM> |jK IfwhdLi*-區(qū)聲二氓* Hi ipL*¥ l 弘利indj_4M屯口氓_関 I:*|?* SfrtC'lxjM-.(；_ H qemluMLHu g：斗r=HM：n.,|*naji jm_gldF_-caTlj

11、 nlifi PUj £ia_4iL<t3Jan_<xr<k«jJLi_iihvJ3!rvcvlX_DFEB?.,?lj tupL«_irawl|WZ .*¥»*: MFdrr口 .Eouwlli|*WTR1p1nB*Wea.fM中WVH|-4ME和:xL4|«aaB|* pnnC傾斜旋轉(zhuǎn)二維碼，系統(tǒng)能夠識(shí)別。3 M|K«BA iBiMlnt zj【3】字符識(shí)別1此項(xiàng)實(shí)驗(yàn)需要使系統(tǒng)識(shí)別特定字符。此字符已由Halcon算子程序規(guī)定為“ HALCON,出現(xiàn)其他字符不可識(shí)別。2. 實(shí)驗(yàn)過(guò)程如【1】中的-3. 實(shí)驗(yàn)

12、數(shù)據(jù)、截圖補(bǔ)充如下:誼、/日 曝光量5000500020000右遮擋10000下遮擋10000角遮擋10000Mm增益識(shí)別結(jié)果0正確識(shí)別3正確識(shí)別0正確識(shí)別0不能識(shí)別0錯(cuò)誤識(shí)別0錯(cuò)誤識(shí)別亞AkW7T7"BW-lBtn©Hit*jJ EidWf rJKlf«mtnrMp4W*% *-=3fjfem1rwvvttWfl由*< 3m*is* 口1.皆wm栩aWM liWtMittaqiwai叩斗*Imi轉(zhuǎn)w 7大HI9«* q.|£Mb 4Mt "3 mt h-* 3 tW “MW 務(wù) M> RMBtar3 wn «&

13、#163;WA* 或4. 思考題：對(duì)物體遮擋后，系統(tǒng)不能夠100%準(zhǔn)確識(shí)別字符。如上圖所示，遮擋部分字符串或者遮擋下方、邊角，都可能使系統(tǒng)不能精確識(shí)別字符，還可能會(huì)產(chǎn)生錯(cuò)誤識(shí)別除字符外的物體?！?】一維測(cè)量1. 本實(shí)驗(yàn)測(cè)量普通芯片的管腳間距。2. 實(shí)驗(yàn)步驟： 置條形碼在載物平臺(tái)上，使其處于鏡頭正下方； 調(diào)整焦距、改變光圈大小，使物體清晰，對(duì)比度高、明暗適中； 利用計(jì)算機(jī)軟件控制相機(jī)對(duì)物體成像； 劃定“匹配區(qū)域”，此步驟是為了在實(shí)際應(yīng)用中，使相機(jī)在多個(gè)零 件中，能夠通過(guò)匹配區(qū)域的特征，識(shí)別出需要測(cè)量的零件（即芯片）。 劃定“測(cè)量區(qū)域”，此步驟是為了在識(shí)別了特定零件后，在該零件 的固定測(cè)量區(qū)域內(nèi)才

14、進(jìn)行測(cè)量，而不是無(wú)范圍的胡亂測(cè)量。 相機(jī)采集后自動(dòng)生成測(cè)量數(shù)據(jù)，此數(shù)據(jù)為像素單位。如需得知確切 管腳間距，要換算成標(biāo)準(zhǔn)長(zhǎng)度單位。 額外測(cè)量直尺間距，為單位換算做準(zhǔn)備。3. 實(shí)驗(yàn)結(jié)果截圖速度慢速度快燉靜止直尺4.思考題a. 更換其他芯片，并不能夠檢測(cè)成功。因?yàn)槠洹捌ヅ鋮^(qū)域”并不重合，所以系統(tǒng)不能識(shí)別芯片并進(jìn)行測(cè)量。b. 測(cè)出來(lái)的數(shù)據(jù)單位是像素。在進(jìn)行了直尺間距測(cè)量后，可大致估計(jì)1mm代表此實(shí)驗(yàn)中的單位“1”，因此可以得到管腳間距的公制長(zhǎng)度值?！?】二維測(cè)量1.對(duì)所給實(shí)驗(yàn)工件測(cè)量板的圖形進(jìn)行測(cè)量。可以通過(guò)系統(tǒng)得到的數(shù) 據(jù)有圓的直徑和矩形的面積。2保持相機(jī)與平臺(tái)距離為47cm。加固背光源。3. 實(shí)驗(yàn)

15、步驟同實(shí)驗(yàn)【4】，必須劃定匹配區(qū)域和測(cè)量區(qū)域。4. 實(shí)驗(yàn)結(jié)果截圖：5.測(cè)量過(guò)程中，有時(shí)會(huì)因?yàn)闇y(cè)量區(qū)域劃定不規(guī)范或者測(cè)量區(qū)域與匹配區(qū)域重合時(shí)，導(dǎo)致系統(tǒng)無(wú)法識(shí)別且測(cè)定6.思考題：測(cè)量數(shù)據(jù)仍為像素，可與【4】方法相同，通過(guò)建立標(biāo)準(zhǔn) 長(zhǎng)度單位與實(shí)驗(yàn)中所得像素?cái)?shù)據(jù)匹配公式，再對(duì)實(shí)驗(yàn)數(shù)據(jù)進(jìn)行換 算得到真實(shí)的長(zhǎng)度單位數(shù)據(jù)?！?】三維形狀匹配 1.對(duì)實(shí)驗(yàn)所給工件進(jìn)行測(cè)量匹配?？梢酝ㄟ^(guò)系統(tǒng)得到三維工件在圖像中的位置，并得到工件在相機(jī)坐標(biāo)系中的坐標(biāo)和姿態(tài)。2. 實(shí)驗(yàn)步驟補(bǔ)充：設(shè)置匹配參數(shù)；加載形狀模型；完成3D形狀匹配3. 實(shí)驗(yàn)結(jié)果截圖:KjA h-ritaW Hl-tvI ww* -W - <im IuI

16、Mim空I 卜 WIW!±J4. 思考題:a.遮擋工件，不能準(zhǔn)確測(cè)量b.旋轉(zhuǎn)工件，并不是任何角度都可以測(cè)量得到正確結(jié)果?！?】木材分類系統(tǒng)1. 本實(shí)驗(yàn)用來(lái)檢測(cè)木板的種類。2. 實(shí)驗(yàn)流程： 木材模板創(chuàng)建：通過(guò)對(duì)各類木板的材質(zhì)進(jìn)行訓(xùn)練，使系統(tǒng)“記憶” 被測(cè)物的特征，能夠在識(shí)別過(guò)程中對(duì)所給木板的材質(zhì)進(jìn)行對(duì)比檢測(cè)。 完成訓(xùn)練后，將任意木板放置在平移臺(tái)上，使系統(tǒng)對(duì)木板材質(zhì)進(jìn)行 識(shí)別。如能夠在“材質(zhì)庫(kù)”中匹配到合適材質(zhì)，顯示正確類別；如不 能匹配，則無(wú)法顯示或者出現(xiàn)錯(cuò)誤識(shí)別。3. 實(shí)驗(yàn)結(jié)果截圖：（均能正確識(shí)別）4.思考題：光照改變會(huì)影響匹配精度。有時(shí)過(guò)于強(qiáng)的光照，木材表面可能反光嚴(yán)重，會(huì)使系統(tǒng)判

17、別錯(cuò)誤，匹配成其他材質(zhì)。下面三 幅圖為同一塊木板，因光照強(qiáng)度不同，而被系統(tǒng)匹配不同材質(zhì)。t :|E“| 牡|"叫MX. |SsHmW* anw*WfrN11-*WWiVI斗虬 H-lUO I*id-j4* Wsr ±flni-¥im *w2«>耳rWI .iMgfeBra I4mn «*« dWLcriMl如-jHSEOH |S»ifuiii | wVR |L創(chuàng)'村翕j曲fl IM靳AWB4 廠二空 ±3S*I _j_I百El«R«f 曲m.HeJIm*41； Hl,|K>FW