楊 意,范開鈞,韓江楓,楊艷麗,初 麒,周卓敏,辜 松,5
基于葉片下苗莖側(cè)視圖像的白掌穴盤苗品質(zhì)檢測
楊 意1,范開鈞2,韓江楓3,楊艷麗4,初 麒4,周卓敏3,辜 松3,5※
(1. 華南農(nóng)業(yè)大學(xué)電子工程學(xué)院,廣州 510642;2. 中國石油大學(xué)(華東)機(jī)電工程學(xué)院,青島 266580;3. 華南農(nóng)業(yè)大學(xué)工程學(xué)院,廣州 510642;4. 廣州實凱機(jī)電科技有限公司,廣州 510642;5. 華南農(nóng)業(yè)大學(xué)南方農(nóng)業(yè)機(jī)械與裝備關(guān)鍵技術(shù)教育部重點實驗室,廣州 510642)
針對穴盤苗葉片之間相互覆蓋難以利用俯視圖像判斷種苗品質(zhì)的問題,該研究以白掌苗為研究對象,提出一種葉片下觀測苗莖局部區(qū)域的方法,通過提取穴盤苗葉片下苗莖參數(shù),結(jié)合種苗級別判斷標(biāo)準(zhǔn),實現(xiàn)葉片相互覆蓋穴盤苗的自動化品質(zhì)檢測。該方法首先確定白掌苗苗莖品質(zhì)分級臨界值,并構(gòu)建由微型相機(jī)和導(dǎo)光纖維組成的苗莖圖像采集單元,在檢測室暗室環(huán)境中捕獲白掌苗葉片下光纖光斑區(qū)域苗莖圖像,利用視覺算法提取苗莖圖像和苗莖投影面積,通過提取的待測白掌苗苗莖投影面積與白掌苗苗莖品質(zhì)分級臨界值對比分析,確定不合格苗,并返回不合格苗穴孔位置信息。試驗結(jié)果表明,穴盤苗品質(zhì)檢測準(zhǔn)確度主要受種苗在穴中位置和輸送速度影響,當(dāng)苗偏離穴中心10 mm以上時,種苗品質(zhì)檢測準(zhǔn)確度最低降至85%以下。當(dāng)種苗品質(zhì)接近分級臨界值時,種苗品質(zhì)檢測準(zhǔn)確度略微下降,但不顯著(>0.05)。針對72孔待售白掌穴盤苗進(jìn)行品質(zhì)檢測試驗,試驗結(jié)果表明,當(dāng)輸送帶速度為0.045 m/s,苗莖偏離距離在10 mm內(nèi),系統(tǒng)的識別準(zhǔn)確率可達(dá)97.92%,對應(yīng)生產(chǎn)率為150盤/h(10 800株/h)。該研究可為存在相鄰葉片覆蓋時穴盤苗分級、品質(zhì)檢測的自動化評估提供理論指導(dǎo)和參考。
機(jī)器視覺;品質(zhì)檢測;設(shè)施園藝;穴盤苗;葉片遮擋
穴盤苗生產(chǎn)技術(shù)已廣泛用于蔬菜和花卉育苗生產(chǎn)中[1-3]。為獲得較高的經(jīng)濟(jì)收益,種苗生產(chǎn)企業(yè)需要保證穴盤苗品質(zhì)。因部分穴孔的苗受種子品質(zhì)、播種精度等因素影響,存在缺苗或者生長狀態(tài)不佳的現(xiàn)象[4],導(dǎo)致整盤穴盤苗售價下降。穴盤苗品質(zhì)不均還會影響后續(xù)機(jī)械移植作業(yè)。為保證穴盤苗品質(zhì)一致,通常需要識別、剔除穴盤中不合格苗,并替換為合格苗。
目前,種苗生產(chǎn)企業(yè)主要利用人工剔除穴盤中不合格苗后補(bǔ)苗。人工作業(yè)方式效率低、勞動成本高、分級判斷標(biāo)準(zhǔn)不穩(wěn)定。采用基于機(jī)器視覺技術(shù)的種苗分選機(jī)可自動識別缺苗穴孔和不合格苗,并剔除不合格苗,分級準(zhǔn)確且作業(yè)效率高。機(jī)器視覺穴盤苗分級通常使用穴盤苗俯視圖像確定苗品質(zhì)[5-8]。Jiang等在研究補(bǔ)苗機(jī)械手路徑優(yōu)化問題時,利用俯視圖像判斷穴盤中不合格苗和缺苗穴孔位置[9]。王永維等利用俯視圖像檢測擬南芥穴盤苗缺苗情況,為自動補(bǔ)苗機(jī)提供缺苗穴孔位置信息[10]。利用俯視圖像判斷苗品質(zhì)的研究均針對葉片無相互遮擋的穴盤小苗[11-13]。但絕大多數(shù)花卉與蔬菜穴盤苗在成苗出售時,存在相鄰苗葉片相互遮擋覆蓋的情況,利用俯視圖像難以評估個體苗的生長狀況。為解決葉片相互覆蓋穴盤苗品質(zhì)判定問題,荷蘭Visser公司的Select-O-Mat高速分級機(jī)[14]、Flier公司的分級生產(chǎn)線[15]和TTA公司的Max Sorter分級機(jī)[16]均將所有苗從穴盤中取出,利用機(jī)器視覺逐個檢測苗品質(zhì)。根據(jù)筆者對國內(nèi)多家大型種苗生產(chǎn)企業(yè)的調(diào)查,一般種苗生產(chǎn)中不合格苗的占比低于20%,取出穴盤中所有苗判斷,需結(jié)構(gòu)復(fù)雜、造價昂貴的分級機(jī),且分級作業(yè)效率不高。
穴盤苗俯視圖像中相鄰苗葉片相互覆蓋,但穴盤苗側(cè)視圖像中苗莖之間分界明顯,個體苗苗莖生長狀態(tài)易于觀測。根據(jù)國家盆花分級標(biāo)準(zhǔn),苗莖是花卉苗定級的重要因素之一[17]。在花卉苗、蔬菜苗和大田作物表型參數(shù)提取方面,已有通過植物苗莖參數(shù)判斷植物生長狀態(tài)的相關(guān)研究[18-23]。Yamamoto等利用機(jī)器學(xué)習(xí)方法檢測番茄苗莖節(jié)間長度,評價番茄苗品質(zhì)[24]。Tian等利用機(jī)器視覺技術(shù)檢測接穗和砧木苗莖,對接穗和砧木苗分級[25]。Shi等利用多視角圖像和深度學(xué)習(xí)算法,自動識別植物葉片、苗莖和葉片生長點,提取莖高等植物表型參數(shù)[26]。上述利用側(cè)視圖像提取苗表型參數(shù)的研究均針對獨立的個體苗,不適應(yīng)狹小空間穴盤苗的表型參數(shù)提取。
綜上所述,本文針對葉片相互覆蓋的穴盤苗品質(zhì)判斷問題,以白掌穴盤成品苗為對象,提出一種葉片下觀測苗莖局部區(qū)域,根據(jù)側(cè)視圖像提取苗莖參數(shù),進(jìn)行種苗品質(zhì)判斷的方法。研究內(nèi)容包括:(1)提出基于苗莖參數(shù)判斷苗品質(zhì)的檢測方法并構(gòu)建適用與穴盤苗的圖像采集單元;(2)建立利用穴盤苗側(cè)視圖像提取苗莖參數(shù)的圖像處理算法;(3)進(jìn)行穴盤苗品質(zhì)檢測系統(tǒng)性能試驗,考察影響穴盤苗品質(zhì)檢測準(zhǔn)確度的因素。
本研究以市場占有率高、存在典型葉片覆蓋的觀葉花卉白掌穴盤成苗為檢測對象。根據(jù)國家盆栽花卉等級標(biāo)準(zhǔn),種苗主要根據(jù)株高及地徑進(jìn)行分級[17]。人工區(qū)分合格苗與不合格苗的標(biāo)準(zhǔn)為:當(dāng)苗莖小于平均苗莖60%或苗高低于平均株高60% 時為不合格苗。種苗生產(chǎn)企業(yè)生產(chǎn)的穴盤苗地徑和株高的相關(guān)性較高,人工快速評價合格苗與不合格苗時主要依據(jù)為株高。作者在研究白掌穴盤苗生長過程中外形參數(shù)變化規(guī)律時發(fā)現(xiàn),其側(cè)視總投影面積與其株高、冠幅、地莖之間均近似呈現(xiàn)線性關(guān)系[18],進(jìn)一步推導(dǎo)出苗莖在25 mm高度內(nèi)投影面積(苗莖投影面積)與株高之間存在公式(1)所示關(guān)系[27]。圖1為白掌穴盤苗視圖及穴株參數(shù)。
1= 0.3421+ 30.699 (1)
據(jù)此,可通過苗莖投影面積推算株高,評判穴盤苗品質(zhì)(基于苗莖投影面積是地徑的直接反映,同時也基于種苗生產(chǎn)企業(yè)穴盤苗地徑和苗高的相關(guān)性較高)。根據(jù)廣州花卉研究中心評判出售前合格白掌苗株高的臨界值80 mm,依據(jù)公式(1),求得苗莖投影面積1的值為144.15 mm2,本研究白掌苗苗莖分級臨界值(the Critical Value of the projection Area of stem,CVA)確定為145 mm2,即苗莖投影面積大于等于145 mm2為合格苗,反之為不合格苗。
1.2.1 系統(tǒng)構(gòu)成
為從葉下角度提取白掌苗苗莖參數(shù),設(shè)計如圖2所示穴盤苗品質(zhì)檢測系統(tǒng),具體包括:苗莖圖像采集單元、PC機(jī)、PLC控制器、輸送帶、檢測室、檢測室(出口、入口、中部)位置的到位檢測傳感器等。
1.穴盤苗(已檢) 2.輸送帶 3.檢測室出口 4.出口傳感器 5.檢測室 6.檢測室內(nèi)位置傳感器 7.苗莖圖像采集單元 8.穴盤苗(檢測中) 9.檢測室入口 10.入口傳感器 11.穴盤苗(待檢) 12.可編程控制器 13.筆記本電腦
穴盤苗品質(zhì)檢測系統(tǒng)工作流程如下:系統(tǒng)啟動后,PLC控制輸送帶將待測穴盤苗送入檢測室內(nèi)部;當(dāng)穴盤到達(dá)檢測室檢測位置,使用苗莖圖像采集單元對穴盤苗逐行拍攝,并將獲取的穴盤苗苗莖圖像傳送至PC機(jī);PC機(jī)圖像處理算法實現(xiàn)苗莖參數(shù)提取、苗品質(zhì)判斷、不合格苗位置信息確定,并將不合格種苗位置信息返回至PLC;整盤穴盤苗品質(zhì)檢測完成后,檢測室出口門打開,穴盤輸送出檢測室。
苗莖圖像采集單元結(jié)構(gòu)如圖3所示,主要由分葉引導(dǎo)片、微型相機(jī)和導(dǎo)光纖維組成。分葉引導(dǎo)片用于分離相鄰兩列穴盤苗交叉的葉片;導(dǎo)光纖維將外部LED光源引導(dǎo)至檢測室待測苗穴孔區(qū)域。針對白掌苗72孔(6 列×12行)苗盤,每兩列之間設(shè)置1組苗莖圖像采集單元,總計3組。
在檢測室內(nèi)苗莖圖像采集單元前方的輸送帶兩側(cè)安裝有對射式光電傳感器,穴盤隨輸送帶每移動一個穴孔距離,穴盤穴孔、穴孔間隙(圖3c)觸發(fā)光電傳感器使之產(chǎn)生開關(guān)信號,PLC捕獲此信號后通過串口發(fā)送拍照命令至PC機(jī),PC機(jī)控制相機(jī)拍攝苗莖圖像。72孔穴盤隨輸送帶移動過程中,共產(chǎn)生12次(12行)觸發(fā)信號,3臺相機(jī)各拍攝12幅圖像,每幅圖像包含2株苗。
1.2.2 苗莖圖像采集系統(tǒng)
由于穴盤苗苗莖拍攝區(qū)域空間狹小,本文選擇CXD209G微型相機(jī),焦距2.8 mm,廣角150°,感光區(qū)域1/4 in,相機(jī)鏡頭直徑和長度分別為10和40 mm。根據(jù)對白掌穴盤苗葉片下苗莖高度部分的統(tǒng)計以及圖像采集預(yù)試驗結(jié)果,設(shè)定相機(jī)安裝高度為2 cm。利用天創(chuàng)恒達(dá)TC-800sd AV圖像處理卡進(jìn)行模擬圖像信息轉(zhuǎn)換。采用Matlab2018b圖像處理軟件讀取轉(zhuǎn)換的數(shù)字圖像信息并進(jìn)行圖像處理。
本研究在檢測室暗室環(huán)境下拍攝白掌苗苗莖,利用導(dǎo)光纖維將LED光源引導(dǎo)至待測苗的苗莖拍攝區(qū)域。如圖4所示,選用直徑為4 mm的導(dǎo)光纖維,形成的光斑僅覆蓋單個穴孔區(qū)域,圖像中只顯示光斑區(qū)域苗莖。
1.3 種苗品質(zhì)判斷及定位
對圖4所拍攝白掌苗苗莖原始圖像,為提高圖像處理速度,將圖像底部720×320(像素)部分作為感興趣區(qū)域(Region of Interest ROI,圖5a)。分析圖像的顏色特征,根據(jù)圖像紅綠藍(lán)(RGB)成分灰度處理[28]結(jié)果(圖5),綠色(G)分量直方圖在接近灰度值255(最明亮)的區(qū)域內(nèi)仍存在較多像素點,對應(yīng)處理得到的圖像更加明亮(直方圖中綠色像素峰值代表白掌苗苗莖總投影面積),因此通過綠色峰值的像素值來計算苗莖投影面積,處理過程和結(jié)果如圖6所示。采用Otsu閾值分割法進(jìn)行二值化,閾值由式(2)確定。
圖6b仍存在穴盤中基質(zhì)顆粒的反射噪聲,通過對圖像使用先腐蝕(圖6c)后膨脹的開運算算法,消除部分圖像噪聲,結(jié)果如圖6d所示。
根據(jù)1.1節(jié)白掌苗品質(zhì)檢測方法,確定白掌苗品質(zhì)時,應(yīng)首先提取苗莖投影面積,分析其與CVA(the Critical Value of the projection Area of stem)值的大小關(guān)系,確定待測白掌苗是否合格。求取圖6d去噪結(jié)果圖像中苗莖投影面積,首先利用輪廓提取算法提取苗莖圖像輪廓(圖 7a),再遍歷輪廓點坐標(biāo)找到圖像坐標(biāo)系中的輪廓最低點(輪廓像素中軸坐標(biāo)為最大值的點,圖7b),該輪廓最低點即為苗莖與基質(zhì)的交界。之后求取基于輪廓最低點上25 mm高度矩形區(qū)域內(nèi)的苗莖像素面積(圖 7c),即為苗莖投影面積(像素)。最后結(jié)合圖像標(biāo)定確定的像素當(dāng)量,得到苗莖投影面積的實際值(mm2)。對圖7c確定的采集區(qū)域,計算對應(yīng)白色斑點的面積,若其數(shù)值小于CVA(145 mm2)則為不合格苗。
將不合格苗位置信息反饋至PLC,供后續(xù)剔苗、補(bǔ)苗機(jī)使用。如圖8所示72孔穴盤,共6列12行,苗莖識別單元上安裝1、2、3號相機(jī),分別檢測穴盤1和2列、3和4列、5和6列的苗。當(dāng)穴盤隨輸送帶運行至檢測區(qū)域時,穴盤底部穴孔遮擋光電傳感器,使之輸出開關(guān)信號。統(tǒng)計穴盤通過苗莖檢測單元時光電傳感器輸出的開關(guān)信號個數(shù)即可計算苗所在穴盤行數(shù),結(jié)合相機(jī)編號與苗在圖像的左右區(qū)域分析可得苗所在列數(shù),根據(jù)行號和列號,即可確定苗位置(圖8)。
為考察上述苗莖圖像采集單元和識別方法檢測白掌穴盤苗品質(zhì)的作業(yè)性能,搭建如圖9所示穴盤苗品質(zhì)檢測平臺。檢測試驗白掌穴盤苗由廣州花卉研究中心提供,為培育期3個月的成品苗。圖像采集單元的導(dǎo)光纖維直徑為4 mm,光源光強(qiáng)設(shè)置為20 lux。相機(jī)測量精度受標(biāo)定精度影響[29],試驗前利用高精度標(biāo)定板從不同角度采集20幅標(biāo)定圖像對相機(jī)進(jìn)行標(biāo)定,以確保相機(jī)測量精度[30-32]。
試驗通過測定視覺檢測系統(tǒng)的檢測準(zhǔn)確度及識別生產(chǎn)率對其作業(yè)性能進(jìn)行考察。輸送帶速度會影響分葉引導(dǎo)片的分葉效果,對苗葉片產(chǎn)生較大距離的拉動,造成苗莖隨葉片拉動偏離拍攝視窗位置。苗莖中心在穴中位置有可能會影響圖像識別時像素當(dāng)量大小,導(dǎo)致苗莖投影面積測量出現(xiàn)偏差。苗莖投影面積值與分級臨界值靠近程度也影響穴盤苗品質(zhì)等級判斷結(jié)果。因此選取輸送帶速度、苗莖中心與穴孔中心在拍攝方向上的偏離距離(偏離距離)、穴盤苗苗莖投影面積與分級臨界值的靠近程度(苗莖投影面積與分級臨界值差值的絕對值與分級臨界值的比值,簡稱偏離率)為影響因素。考慮到機(jī)器視覺檢測耗時,輸送速度3個水平值設(shè)定為0.03、0.045和0.06 m/s。根據(jù)72 孔穴盤的穴孔尺寸(41 mm×41 mm),偏離距離3個水平值設(shè)定為<5 mm、5 ~10 mm、10 ~15 mm。穴盤苗苗莖投影面積偏離率3個水平設(shè)定為<10%,10%~20%和>20%三個級別。識別準(zhǔn)確度定義為穴盤中品質(zhì)等級識別正確的苗數(shù)(包括合格苗數(shù)量與不合格苗數(shù)量)與苗盤中苗總數(shù)量之比。各影響因素水平如表1所示。試驗設(shè)計為三因素三水平全因素試驗,每組試驗測試72株苗,重復(fù)3次。
表1 白掌穴盤苗品質(zhì)檢測試驗因素水平
表2為試驗方案與試驗結(jié)果。由表2可知,識別準(zhǔn)確度隨輸送速度的提高有下降趨勢,當(dāng)輸送速度為0.03 m/s和0.045 m/s時,識別準(zhǔn)確度的平均值分別為96.09%和96.35%,當(dāng)速度提升至0.06 m/s時,識別準(zhǔn)確度平均值下降至91.10%。識別準(zhǔn)確度受偏離距離影響趨勢明顯,隨著偏離距離的增大,識別準(zhǔn)確度不斷下降。
表2 白掌穴盤苗品質(zhì)檢測試驗結(jié)果
輸送速度為0.06 m/s,偏離距離在10~15 mm時,識別準(zhǔn)確度最小值為83.33%。當(dāng)輸送速度和偏離距離保持不變時,偏離率從小于10%到大于20%,識別準(zhǔn)確率變化均在2個百分點以內(nèi)。
利用SPSS 20.0.0軟件對表2試驗結(jié)果進(jìn)行方差分析,結(jié)果如表3所示。方差分析結(jié)果表明,3個試驗因素對苗品質(zhì)識別度的影響顯著性從大到小的順序為偏離距離、輸送速度和偏離率,其中偏離距離、輸送速度對苗品質(zhì)識別準(zhǔn)確率具有極顯著的影響(<0.01),偏離率對識別準(zhǔn)確度的影響不顯著。
表3 白掌穴盤苗品質(zhì)檢測識別準(zhǔn)確度方差分析
注:**表示極顯著(<0.01)。
Note: ** shows that variance have extremely significant on results (<0.01).
當(dāng)穴盤隨輸送帶移動時,分葉引導(dǎo)片在分離相鄰植株的葉片時,會對苗株形成與穴盤運動方向相反的作用力,導(dǎo)致苗莖傾斜。輸送帶的速度越高,苗莖傾斜的情況越嚴(yán)重,苗莖測量結(jié)果的誤差越大。輸送帶速度過高,受相機(jī)幀速影響,圖像會有拖影現(xiàn)象。輸送帶速度過高也會導(dǎo)致葉片損傷、苗倒伏、甚至個別苗被從穴孔中拉出。
苗株在穴孔中位置影響品質(zhì)檢測時視覺系統(tǒng)物距,從而導(dǎo)致像素當(dāng)量發(fā)生變化[29],使得苗莖測量產(chǎn)生誤差。當(dāng)偏離距離較小時,通過檢測苗莖輪廓最低點在圖像中的位置,對像素當(dāng)量值進(jìn)行調(diào)整,可減少苗莖偏離穴孔中心所產(chǎn)生的誤差。但當(dāng)偏離距離大于10 mm時,物距減少10 mm以上會導(dǎo)致苗莖輪廓最低點和最低點附近區(qū)域苗莖圖像缺失(圖10a),物距增大10 mm以上時,苗株在整體圖像中的位置上移,導(dǎo)致苗莖待測區(qū)域中的部分圖像區(qū)域缺失(圖10b)。這兩種情況所導(dǎo)致的苗莖區(qū)域圖像缺失均會使苗莖投影面積測量結(jié)果產(chǎn)生偏差,從而使苗株品質(zhì)判斷出錯。
將表2中的27組數(shù)據(jù)按偏離距離分為3組,計算每組的識別準(zhǔn)確度平均值。當(dāng)偏離距離小于5 mm時,識別準(zhǔn)確度平均值為97.43%。當(dāng)偏離距離在5 mm到10 mm范圍內(nèi)時,識別準(zhǔn)確度平均值為95.94%,識別準(zhǔn)確度僅下降了1.49%。當(dāng)偏離距離大于10 mm時,識別準(zhǔn)確度平均值大幅下降至90.17%,不能滿足種苗生產(chǎn)企業(yè)的實際生產(chǎn)需求。因此為保證種苗品質(zhì)檢測的精度,精量播種時,種子與穴孔中心的偏離距離應(yīng)在10 mm以內(nèi),說明本檢測系統(tǒng)對于穴盤苗生產(chǎn)時,播種機(jī)的播種定位精度有要求。
偏離率對識別準(zhǔn)確度的影響不顯著,去除偏離率因素,圖11顯示了偏離距離和輸送速度對識別準(zhǔn)確度的影響(偏離率Dr<10%)。穴盤中偏離率Dr<10%的苗僅為待測苗中的一小部分,因此實際苗品質(zhì)檢測準(zhǔn)確度優(yōu)于圖 11中的結(jié)果。
綜上所述,72孔白掌穴盤苗品質(zhì)檢測試驗結(jié)果表明,輸送帶速度在0.03 ~0.045 m/s范圍,苗品質(zhì)檢測的準(zhǔn)確度能均能達(dá)到95%以上。結(jié)合生產(chǎn)率要求,適宜的輸送帶速度定為0.045 m/s,此速度下偏離距離在10 mm內(nèi),系統(tǒng)的識別準(zhǔn)確度均值可達(dá)97.92%,對應(yīng)生產(chǎn)率為150盤/h(10 800株/h)。作為對比,作者采用俯視圖像判斷種苗品質(zhì),相鄰苗葉片的覆蓋程度會嚴(yán)重影響種苗品質(zhì)檢測準(zhǔn)確性,不合格苗的檢出率約在60%左右。而采用本文方法可避免葉片覆蓋嚴(yán)重時帶來的判斷誤差,種苗品質(zhì)識別準(zhǔn)確度提升至97%以上。通過加長檢測室,增加檢測室中苗莖圖像采集單元的數(shù)目可以顯著提升種苗品質(zhì)檢測生產(chǎn)率。
利用俯視圖像難以檢測相互遮擋穴盤苗的品質(zhì),目前針對遮擋穴盤苗品質(zhì)檢驗均采用將苗移出穴盤進(jìn)行分級的方法。國外已有將苗移出穴盤檢驗苗品質(zhì)的分級機(jī)的作業(yè)生產(chǎn)率為6 000~8 000 株/h[33],本研究檢測方法作業(yè)生產(chǎn)率相比將苗移出穴盤的分級方法高出約25%。
1)針對葉片相互覆蓋的穴盤苗,提出一種葉片下觀測苗莖局部區(qū)域的方法,利用微型相機(jī)和導(dǎo)光纖維獲取暗室環(huán)境下穴盤苗莖局部圖像,結(jié)合種苗級別判斷標(biāo)準(zhǔn),實現(xiàn)了葉片相互覆蓋穴盤苗的自動化品質(zhì)檢測。
2)試驗結(jié)果表明,穴盤苗品質(zhì)檢測的準(zhǔn)確度主要受苗在穴中位置和輸送速度影響,當(dāng)苗偏離穴中心10 mm以上時,種苗品質(zhì)檢測準(zhǔn)確度降至85%以下。當(dāng)種苗品質(zhì)接近分級臨界值時,種苗品質(zhì)檢測準(zhǔn)確度略微下降,但影響并不顯著。
3)針對72孔白掌穴盤苗的品質(zhì)檢測,當(dāng)輸送帶為0.045 m/s,苗莖偏離距離在10 mm內(nèi)時,系統(tǒng)的識別準(zhǔn)確率可達(dá)97.92%,對應(yīng)生產(chǎn)率為150盤/h(10 800株/h)。
[1] Gaikwad B B, Sirohi N P S. Design of a low-cost pneumatic seeder for nursery plug trays[J]. Biosystems Engineering, 2008, 99(3): 322-329.
[2] Kostopoulou P, Radoglou K, Dini-Papanastasi O, et al. Enhancing planting stock quality of Italian cypress (L.) by pre-cultivation in mini-plugs[J]. Ecological Engineering, 2010, 36(7): 912-919.
[3] 孔德棟. 鐵皮石斛穴盤育苗關(guān)鍵技術(shù)研究及推廣應(yīng)用[D].杭州:浙江大學(xué),2010.
Kong Dedong. Research and Extension of Key Techniques ofPlug Seedlings[D]. Hangzhou: Zhejiang University, 2010. (in Chinese with English abstract)
[4] 文永雙,張宇,田金元,等. 蔬菜移栽缽苗檢測與缺苗補(bǔ)償系統(tǒng)設(shè)計與試驗[J]. 農(nóng)業(yè)機(jī)械學(xué)報,2020,51(S1):130-136.
Wen Yongshuang, Zhang Yu, Tian Jinyuan, et al. Design and experiment of detection and supply system of vegetable plug seedlings for transplanting[J]. Transactions of the Chinese Society for Agricultural Machinery, 2020, 51(S1): 130-136. (in Chinese with English abstract)
[5] Feng Q C, Zhao C J, Jiang K, et al. Design and test of tray-seedling sorting transplanter[J]. International Journal of Agricultural & Biological Engineering, 2015, 8(2): 14-20.
[6] Tong J H, Li J B, Jiang H Y. Machine vision techniques for the evaluation of seedling quality based on leaf area[J]. Biosystems Engineering, 2013, 115(3): 369–379.
[7] Ure?a R, Rodr??guez F, Berenguel M. A machine vision system for seeds quality evaluation using fuzzy logic[J]. Computers & Electronics in Agriculture, 2001, 32(1): 1-20.
[8] 方超. 穴盤苗自動化移缽體系的結(jié)構(gòu)設(shè)計與仿真分析[D]. 杭州:浙江大學(xué),2012.
Fang Chao. Design and Simulation of Automatic Seediling Transplanter[D]. Hangzhou: Zhejiang University, 2012. (in Chinese with English abstract)
[9] Jiang Z H, Zhou M C, Tong J H, et al. Comparing an ant colony algorithm with a genetic algorithm for replugging tour planning of seedling transplanter[J]. Computers and Electronics in Agriculture, 2015, 113: 225-233.
[10] 王永維,肖璽澤,梁喜鳳,等. 蔬菜穴盤苗自動補(bǔ)苗試驗臺穴孔定位與缺苗檢測系統(tǒng)[J]. 農(nóng)業(yè)工程學(xué)報,2018,34(12):35-41.
Wang Yongwei, Xiao Xize, Liang Xifeng, et al. Plug hole positioning and seedling shortage detecting system on automatic seedling supplementing test-bed for vegetable plug seedlings[J]. Transactions of the Chinese Society of Agricultural Engineering (Transactions of the CSAE), 2018, 34(12):35-41. (in Chinese with English abstract)
[11] 馮青春,王秀,姜凱,等. 花卉幼苗自動移栽機(jī)關(guān)鍵部件設(shè)計與試驗[J]. 農(nóng)業(yè)工程學(xué)報,2013,29(6):21-27.
Feng Qingchun, Wang Xiu, Jiang Kai, et al. design and test of key parts on automatic transplanter for flower seedling[J]. Transactions of the Chinese Society of Agricultural Engineering (Transactions of the CSAE), 2013, 29(6): 21-27. (in Chinese with English abstract)
[12] 胡飛,尹文慶,陳彩蓉,等. 基于機(jī)器視覺的穴盤幼苗識別與定位研究[J]. 西北農(nóng)林科技大學(xué)學(xué)報:自然科學(xué)版,2013,41(5):183-188.
Hu fei, Yin Wenqing, Chen Cairong, et al. Recognition and localization of plug seedling based on machine vision[J]. Journal of Northwest A&F University: Natural Science Edition, 2013, 41(5): 183-188. (in Chinese with English abstract)
[13] 張國棟,范開鈞,王海,等. 基于機(jī)器視覺的穴盤苗檢測試驗研究[J]. 農(nóng)機(jī)化研究,2020,42(4):175-179.
Zhang Guodong, Fan Kaijun, Wang Hai, et al. Experimental study on detection of plug tray seedlings based on machine vision[J]. Journal of Agricultural Mechanization Research, 2020, 42(4): 175-179. (in Chinese with English abstract)
[14] Select-O-Mat High Speed[EB/OL]. 2016-07-12[2020-12-11]. https: //www. visser. eu/vision-grading-machines/select-o- mat-high-speed.
[15] Germination vision system[EB/OL]. 2017-05-20[2020-12-11]. https: //fliersystems. com/en/products/germination-vision- system.
[16] The maxsorter[EB/OL]. 2016-09-03[2020-12-11]. https: //www. tta. eu/equipment/selecting/maxsorter.
[17] 國家質(zhì)量技術(shù)監(jiān)督局. GB/T 18247. 5-2000,國家盆花產(chǎn)品等級標(biāo)準(zhǔn)[S]. 北京: 中國標(biāo)準(zhǔn)出版社,2001.
[18] 楊意,初麒,楊艷麗,等. 基于機(jī)器視覺的白掌組培苗在線分級方法[J]. 農(nóng)業(yè)工程學(xué)報,2016,32(8):33-40.
Yang Yi, Chu Qi, Yang Yanli, et al. Online grading method for tissue culture seedlings offloribundum based on machine vision[J]. Transactions of the Chinese Society of Agricultural Engineering (Transactions of the CSAE), 2016, 32(8): 33-40. (in Chinese with English abstract)
[19] Ashraf M A, Kondo N, Shiigi T. Use of machine vision to sort tomato seedlings for grafting robot[J]. Engineering in Agriculture, Environment & Food, 2011, 4(4): 119-125.
[20] Huang Y J, Lee F F. An automatic machine vision-guided grasping system for Phalaenopsis tissue culture plantlets[J]. Computers and Electronics in Agriculture, 2010, 70(1): 42-51.
[21] Vazquez-Arellano M, Reiser D, Paraforos S D, et al. 3-D reconstruction of maize plants using a time-of-flight camera[J]. Computers and Electronics in Agriculture, 2018, 145: 235-247.
[22] Hang L, Tang L, Steven W, et al. A robotic platform for corn seedling morphological traits characterization[J]. Sensors, 2017, 17(9): 2082.
[23] Golbach F, Kootstra G, Damjanovic S, et al. Validation of plant part measurements using a 3D reconstruction method suitable for high-throughput seedling phenotyping[J]. Machine Vision & Applications, 2016, 27(5):663-680.
[24] Yamamoto K, Guo W, Ninomiya. S. Node detection and internode length estimation of tomato seedlings based on image analysis and machine learning[J]. Sensors, 2016, 16: 1044.
[25] Tian S B, Wang Z F, Yang J F, et al. Development of an automatic visual grading system for grafting seedlings[J]. Advances in Mechanical Engineering 2017, 9(1): 1-12.
[26] Shi W N, Zedde R, Jiang H Y, et al. Plant-part segmentation using deep learning and multi-view vision[J]. Biosystems Engineering, 2019, 187: 81-95.
[27] 楊意. 基于機(jī)器視覺的白掌組培苗分級關(guān)鍵技術(shù)研究[D]. 廣州:華南農(nóng)業(yè)大學(xué),2018.
Yang Yi. Key Technologies of Grading Method forTissue Culture Seedlings Based on Machine Vision[D]. Guangzhou: South China Agricultural University, 2018. (in Chinese with English abstract)
[28] Dong W, Ma X, Li H, et al. Detection of performance of hybrid rice pot-tray sowing utilizing machine vision and machine learning approach[J]. Sensors, 2019, 19(23): 5332.
[29] 郝永平,王永杰,張嘉易,等. 面向視覺測量的像素當(dāng)量標(biāo)定方法[J]. 納米技術(shù)與精密工程,2014,12(5):373-380.
Hao Yongping, Wang Yongjie, Zhang Jiayi, et al. Pixel equivalent calibration method for vision measurement[J]. Nanotechnology & Precision Engineering, 2014, 12(5): 373-380. (in Chinese with English abstract)
[30] 尹洪濤,劉成,李一兵,等. 相機(jī)標(biāo)定誤差因素分析[J]. 信息通信,2012,117(2):28-32.
Yin Hongtao, Liu Cheng, Li Yibing, et al. Analysis of factors on the error of the camera calibration[J]. Information & Communications, 2012, 117(2): 28-32. (in Chinese with English abstract)
[31] 胡楠,魯光泉,荔濤,等. 基于分布標(biāo)定法的交通事故現(xiàn)場攝影測量精度實驗分析[J]. 汽車工程,2008,30(7):557-559.
Hu Nan, Lu Guangquan, Li Tao, et al. Calibration precision experiments analysis of photogrammetry in traffic accident scene based on separately-calibrate method[J]. Automotive Engineering, 2008, 30(7): 557-559. (in Chinese with English abstract)
[32] Zhang Z Y. A flexible new technique for camera calibration[J]. IEEE Transactions on Pattern Analysis and Machine Intellgence, 2000, 22(11): 1330-1334.
[33] 辜松. 設(shè)施園藝現(xiàn)代生產(chǎn)裝備與技術(shù)[M]. 北京:中國農(nóng)業(yè)出版社,2015.
Quality inspection ofplug seedlings based on the side view images of the seedling stem under the leaves
Yang Yi1, Fan Kaijun2, Han Jiangfeng3, Yang Yanli4, Chu Qi4, Zhou Zhuomin3, Gu Song3,5※
(1.,,510642,; 2.,,266580,; 3.,,510642,; 4..,.,510642,; 5.,,,510642,)
Plug seedlings have been widely used in the production of vegetable and flower planting. The consistent quality of plug seedlings depends mainly on economic benefits. It is usually necessary to identify and remove unqualified seedlings from the plugs, and then replace them with qualified seedlings. The manual operation of substandard seedlings is mainly used from the plugs to the supplement seedling at present, indicating low efficiency, high labor costs, and unstable classification. The seedling sorting machine using machine vision can automatically identify the lack of seedling holes and unqualified seedlings, and then remove the unqualified seedlings from the plug trays. The accurate classification can be achieved with higher operation efficiency. The top view images are selected to judge the quality of plug seedlings with no crossed leaves and no mutual obscuration. However, the leaves of adjacent seedlings cross each other or are blocked and covered, when most plug seedlings of flower and vegetable are sold. It cannot be evaluated on the growth status and quality of individual seedlings using the top view image. Taking theseedlings as the research object, this study aims to observe the local area of seedling stem under the leaves using perspective images under the leaves. An automatic quality inspection of plug seedlings was realized to combine with the judging standard of seedling level, particularly on the stem image covering each other with leaves. Firstly, the critical value of the projection area of the stem ofseedlings was proposed, according to the production standards. Secondly, an image acquisition unit of the seedling stem was constructed, consisting of a leaf guide piece, a miniature camera, and two light guide fibers. Subsequently, the stem images were captured under the leaf ofseedlings in the darkroom. Then, the PC vision was utilized to analyze the images and projection area of the seedling stem. The seedlings were determined to be qualified or not, according to the quality evaluation on the projection area and the critical value of theseedling stem. The hole positions of unqualified seedlings were returned to PLC at last. A three-factor three-level test was carried out to select the conveyor speed, where the deviation of the center distance between seedling stem and hole in the shooting direction, the deviation rate-How closed the projection area of the stem to the Critical Value of the Projection Area of Stem(CVA) as the test factors. The quality test results show that the accuracy of quality detection of plug seedlings depended mainly on the deviation distance and conveyor speed. Specifically, the accuracy of quality detection dropped bellow 85%, when the seedling deviated from the hole center greater than 10 mm and the conveyor speed increased to 0.06m/s. But there was no significant impact when the projection area of the stem was close to CVA. In addition, the quality inspection test was carried out on 72 holes ofplug seedlings. It was found that the recognition accuracy of the system reached 97.92%, and the productivity was 150 tray/h, and 10 800 plant/h, when the conveyor speed was 0.045 m/s and the deviation distance of seedling stem was within 10mm. This finding can provide a strong theoretical reference for the automatic evaluation of plug seedlings grading and quality inspection, particularly when adjacent leaves were covered.
machine vision; quality inspection; protected horticulture; plug seedlings; leaf covering
楊意,范開鈞,韓江楓,等. 基于葉片下苗莖側(cè)視圖像的白掌穴盤苗品質(zhì)檢測[J]. 農(nóng)業(yè)工程學(xué)報,2021,37(20):194-201.doi:10.11975/j.issn.1002-6819.2021.20.022 http://www.tcsae.org
Yang Yi, Fan Kaijun, Han Jiangfeng, et al. Quality inspection ofplug seedlings based on the side view images of the seedling stem under the leaves[J]. Transactions of the Chinese Society of Agricultural Engineering (Transactions of the CSAE), 2021, 37(20): 194-201. (in Chinese with English abstract) doi:10.11975/j.issn.1002-6819.2021.20.022 http://www.tcsae.org
2021-07-28
2021-09-26
廣東省重點領(lǐng)域研發(fā)計劃資助(2019B020214005);廣東省現(xiàn)代農(nóng)業(yè)產(chǎn)業(yè)共性關(guān)鍵技術(shù)研發(fā)創(chuàng)新團(tuán)隊建設(shè)項目(2021KJ131)
楊意,博士,講師,研究方向為現(xiàn)代園藝生產(chǎn)智能裝備。Email:yangyihn2007@163.com
辜松,博士,教授,研究方向為現(xiàn)代園藝生產(chǎn)裝備。Email:sgu666@sina.com
10.11975/j.issn.1002-6819.2021.20.022
S233.74;S609.9
A
1002-6819(2021)-20-0194-08