Computers and Electronics in Agriculture:利用高光谱成像技术评估玉米饲料加工质量

学术   2024-11-01 18:52   四川  

当玉米植株作为饲料被收获时,饲料的质量在很大程度上取决于玉米籽粒大小以及是否充分破碎。对于奶牛饲料,破碎的籽粒中的淀粉更易被获取,能在相同饲料量下提高产奶量;在沼气生产中,完整或破碎不充分的玉米籽粒因为其中的淀粉发酵更慢且不完全,导致出气量少,能量产出较低。玉米籽粒淀粉的暴露取决于饲料收割机的设置,如切割长度和加工辊距离。现代收割机能在短时间内处理大量玉米饲料,不理想的设置会影响收割机燃油消耗和收获量,激进的设置不一定能提高加工质量,还可能增加能耗。传统上采用Kernel Processing Score(KPS)来评估玉米加工质量,其定义为通过4.75mm筛的淀粉颗粒的质量分数,理想值接近1。但确定KPS的过程涉及多个干燥、称重和分离步骤,不适合田间评估,无法为操作员优化收割机设置提供实时反馈。

随着计算机视觉用于检测和计数操作,已有研究使用图像分析和深度学习方法评估KPS,但这些研究使用RGB图像,籽粒和其他饲料颗粒之间对比度有限。光谱成像能同时提供光谱和空间信息,其光谱信息可用于区分不同材料。传统处理高光谱图像数据的方法是使用机器学习模型基于获取的光谱对图像中的像素进行分类,已有研究使用此方法估计玉米作物的生物能源潜力和产量,以及评估单个籽粒的质量。但这些模型缺乏考虑空间或相邻像素信息的能力,而计算KPS需要估计平均粒径或粒径分布以及籽粒形状,因此引入深度学习模型同时获取光谱和空间特征。深度学习模型近年来在RGB数据上有广泛研究,但在高光谱数据上的应用,特别是在目标检测方面鲜见报道。

近期,一项发表于Computers and Electronics in Agriculture的研究,探讨了利用高光谱成像技术评估玉米饲料中籽粒加工质量的方法,通过对比不同模型,证明了光谱信息在籽粒检测中的价值,并分析了各模型的优缺点及应用前景。

材料与方法

研究团队于2021年夏季在意大利博洛尼亚采集玉米样本,包括不同切割长度和加工处理设置的样本,用于像素分类模型和图像目标检测模型。使用FX10e推扫式高光谱成像系统(芬兰SPECIM),在435-1002nm波长范围采集高光谱数据并收集 RGB 参考图像(图1),手动分离部分样本为纯籽粒和非籽粒材料(MOK),对 RGB 图像标注并投影到高光谱图像上(图2,3)。将原始光谱转换为相对反射率值,采用多种光谱预处理技术,包括Savitsky-Golay平滑、一阶导数计算、正交信号校正 (OSC)等。采用逐步筛选法,以 Wilk’s Lambda 为准则,筛选出最具信息量的波长。使用 PLSDA 模型,基于像素光谱将玉米饲料混合物中的像素分类为籽粒或 MOK。采用Faster R-CNN模型,以Resnet50 V2为骨干网络,对高光谱图像进行处理,调整模型输入通道数,采用随机梯度下降法进行训练(图4)。像素分类模型采用总体准确率评估,深度学习模型采用平均精度(AP)指标,包括 AP50 和 AP30。

图1 图像采集装置的示意图

图2 分离出的籽粒(左)和非籽粒材料(右)

图3 RGB图像上的真实标注(左)及对应高光谱图像生成的虚拟RGB图像(右)

图4 用于籽粒检测的Faster R-CNN架构示意图

主要研究结果

光谱预处理和波长选择

OSC预处理的PLSDA模型在独立测试集上准确率最高,达95.2%。筛选出的5个重要波段分别为935-990nm、435-484nm、460-510nm、633-685nm和688-740nm,基于这5个波段的模型准确率与全光谱模型相近,且优于RGB模型

表1 使用不同波段数量的像素分类器概述及其在训练集、验证集和测试集上的准确率

图5 (a)非籽粒材料(上)和籽粒(下)的像素分类模型及其预测(右)和真实RGB(左)

(b)5波段像素分类,用于核检测,假阴性(红色),真阳性(黄色),假阳性(蓝色)

Faster R-CNN模型的籽粒检测

基于5个选定波段的Faster R-CNN模型在AP50指标上优于基于RGB的模型,但 AP50值仍较低,可能是由于高光谱图像空间分辨率低,限制了小籽粒的空间信息。提高交并比(IoU)阈值至 0.3(AP30)时,模型性能有所提高,5 个波段模型在有锚点调整时 AP30 值最高可达 53.3%。

表2 IoU值为 0.3 和 0.5 时,最佳的 5 个波长模型和 RGB 模型在验证集和测试集上的平均精度值

高光谱成像技术为玉米饲料籽粒检测提供了新思路,但仍需提高相机空间分辨率、优化模型架构,以提升检测性能,助力饲料生产的优化。期待后续研究能取得更大突破!
原文
Van Puyenbroeck E, Wouters N, Leblicq T, et al. Detection of kernels in maize forage using hyperspectral imaging[J]Computers and Electronics in Agriculture, 2024, 225: 109336.

相关阅读:
• 利用高光谱成像和AI技术评估砧木对葡萄光合作用的影响
• 利用高光谱成像技术评估芥菜籽可提取油的成分和含量
• 高光谱成像在精准农业中的系统性综述:现状与前景分析

人烟寒橘柚,秋色老梧桐。

AgriPheno平台
植物生理生态、植物表型组学和基因组学、激光雷达探测技术及数据分析、光谱技术、花粉活力分析、生物育种、温室气体、机器人自动化等领域,国内外最新资讯、战略与政策导读。
 最新文章