English

中国农机化学报

中国农机化学报 ›› 2020, Vol. 41 ›› Issue (10): 183-190+210.DOI: 10.13733/j.jcam.issn.2095-5553.2020.10.027

• 中国农机化学报 • 上一篇    下一篇

基于快速卷积神经网络的果园果实检测试验研究

张磊;姜军生;李昕昱;宋健;解福祥;   

  1. 山东科技大学机械电子工程学院;潍坊学院机电与车辆工程学院;山东工业技师学院;
  • 出版日期:2020-10-15 发布日期:2020-10-15
  • 基金资助:
    国家自然科学基金项目(51505337);; 山东省重点研发计划项目(2019GNC106144);; 山东省农机装备研发创新技术项目(2018YF005-05);; 山东省高等学校科技计划项目(J17KA150)

  • Online:2020-10-15 Published:2020-10-15

摘要: 近年来,基于数字图像处理和机器学习算法的果实自动识别检测研究已经越来越成熟。针对传统检测方法检测过程中难以满足实时性要求的缺点,采用了基于Faster-RCNN的果实快速检测模型。模型由卷积神经网络(CNN)和区域提议网络(RPN)组成,首先由CNN进行卷积和池化操作提取特征,然后由RPN选取候选区域,通过网络全连接层参数共享,由目标识别分类器和边界框预测回归器得到多个可能包含目标的预测框,最后通过非极大值抑制挑选出精度最高的预测框完成目标检测。分别对桃子、苹果和橙子的三种果实进行检测,采用迁移学习方法,使用已经预训练好的两种深度神经网络模型ZFnet和VGG16,通过数据集的训练对Dropout及候选区域数量进行参数调整完成网络调优。检测并分析果实不同布局形态下模型的检测效果。试验结果表明,当Dropout取值为0.5或0.6,候选区域数量为300时网络模型最佳,ZFnet网络中,苹果平均精确度为92.70%,桃子为90.00%,而橙子为89.72%。VGG16网络中,苹果平均精度为94.17%,桃子为91.46%,橙子为90.22%。且ZFnet和VGG16的图像处理速度分别达到17 fps和7 fps,能够达到果实实时检测的目的。

关键词: 果实检测;深度学习;农业机器人;神经网络;迁移学习

中图分类号: