• 《中国科学引文数据库(CSCD)》来源期刊
  • 中国科技期刊引证报告(核心版)期刊
  • 《中文核心期刊要目总览》核心期刊
  • RCCSE中国核心学术期刊

甘蔗立式夹持输送通道剥叶装置设计与试验

周绍鹏, 刘庆庭, 杨丹彤, 黄淼, 何腾锋, 黄峥

周绍鹏, 刘庆庭, 杨丹彤, 等. 甘蔗立式夹持输送通道剥叶装置设计与试验[J]. 华南农业大学学报, 2019, 40(3): 117-124. DOI: 10.7671/j.issn.1001-411X.201807002
引用本文: 周绍鹏, 刘庆庭, 杨丹彤, 等. 甘蔗立式夹持输送通道剥叶装置设计与试验[J]. 华南农业大学学报, 2019, 40(3): 117-124. DOI: 10.7671/j.issn.1001-411X.201807002
ZHOU Shaopeng, LIU Qingting, YANG Dantong, et al. Design and test on leaf-stripping device of sugarcane harvester by a vertical clamping-conveying channel[J]. Journal of South China Agricultural University, 2019, 40(3): 117-124. DOI: 10.7671/j.issn.1001-411X.201807002
Citation: ZHOU Shaopeng, LIU Qingting, YANG Dantong, et al. Design and test on leaf-stripping device of sugarcane harvester by a vertical clamping-conveying channel[J]. Journal of South China Agricultural University, 2019, 40(3): 117-124. DOI: 10.7671/j.issn.1001-411X.201807002

甘蔗立式夹持输送通道剥叶装置设计与试验

基金项目: 国家现代农业产业技术体系(糖料)建设专项资金资助(CARS-17);广东白云学院校级项目(2017BYKY11)
详细信息
    作者简介:

    周绍鹏(1989—),男,硕士,E-mail: zhshpe0510@163.com

    通讯作者:

    刘庆庭(1967—),男,教授,博士,E-mail: qingting@scau.edu.cn

  • 中图分类号: S225.53

Design and test on leaf-stripping device of sugarcane harvester by a vertical clamping-conveying channel

  • 摘要:
    目的 

    探讨甘蔗立式夹持输送剥叶技术在整秆式收割机中的可行性,解决现有整秆式甘蔗联合收割机甘蔗通道长、作业效率低的问题。

    方法 

    以4ZZX-48型甘蔗收割机为作业平台,在输送通道上设计立式剥叶装置。通过收获试验,分析了夹持输送链轮转速(n1)、剥叶辊筒角度(β)、剥叶辊筒转速(n2)和甘蔗喂入率(q)等因素对甘蔗立式夹持输送剥叶性能的影响。

    结果 

    n1n2对剥叶性能有显著影响,各因素对剥叶性能的影响依次为n1>n2>q>βn1为60 r/min、β为30°、n2为360 r/min、q为7.5 kg/s时,甘蔗叶片剥净率为76.6%,剥叶性能达到最优。曲线回归分析表明,剥叶辊n2/n1与剥净率之间存在着二次多项式关系,n2/n1在5~6之间时,剥净率约77%,达到试验最优值。

    结论 

    基于甘蔗立式夹持输送剥叶技术的收割机具有可行性,本研究结果对研发新型整秆式甘蔗收割机有一定参考价值。

    Abstract:
    Objective 

    To explore the feasibility of sugarcane vertical clamping-conveying technology for the whole stalk harvester, and provide a technical support for solving the problem of long sugarcane channel and low working efficiency of the existing stalk-type sugarcane combine harvester.

    Method 

    A kind of vertical stripper was designed in a clamping-conveying channel for 4ZZX-48 sugarcane harvester . A harvesting test of this device was conducted in field. The influence factors of leaf stripping effect were analyzed, including the rotation rate of conveyor chain sprocket(n1), the installation angle of leaf stripping roller(β), the rotation rate of leaf stripping roller(n2) and sugarcane feeding speed(q)

    Result 

    The values of n1 and n2 had significant impact on leaf stripping effect. The ranking of influence was n1>n2>q>β. When n1 was 60 r/min , n2 was 360 r/min , β was 30° and q was 7.5 kg/s, the machine got the best stripping effect and leaf stripping rate was 76.6%. The results of curve regression analysis showed that there was a quadratic polynomial relation between clearing rate and the ratio of n2 to n1. When the value of n2/n1 ranged from 5 to 6, clearing rate reached the maximum of around 77%.

    Cluclusion 

    This harvester, based on sugarcane vertical clamping-conveying and stripping technology, is feasible and has certain reference value for research and development of a new whole stalk sugarcane harvester.

  • 奶牛体尺能够反映其生长发育状况、繁殖能力、产奶能力及潜在经济价值等重要信息[1-3]。长期以来,我国奶牛体尺测量主要采用传统的接触式测量,由经验丰富的工作人员利用卡尺、皮尺、卷尺、测杖等工具测量或者通过人眼估算,存在复杂繁琐、测量效率低、易受环境和测量人员主观因素影响等问题[4]

    随着机器视觉技术的快速发展,家禽家畜的体尺测量有更多的解决方案,主要可分为基于二维图像的体尺测量和基于三维点云的体尺测量2种方式[4]。在基于二维图像的体尺测量方面,Tasdemir等[5]拍摄荷斯坦奶牛顶部和侧面RGB图像,采用直接线性变化法标定相机,利用图像分析软件基于点云计算奶牛体尺,该方法测得奶牛体高、臀高、体长、臀宽准确率分别为97.72%、98.00%、97.89%、95.25%。刘同海等[6]在饮水器正上方采集120日龄猪只的体尺图像,将猪体目标从二值图像中分割,实时提取体尺测点,该方法测得猪只体长的平均相对误差为0.92%。薛广顺等[7]利用Logitech Webcam Pro 9000摄像机采集牛体图像,采用贝叶斯决策皮肤检测法提取牛体,基于尺度不变特征变换(Scale-invariant feature transform,SIFT)算法实现特征点匹配,利用双目相机成像模型结合相机标定参数获取牛体三维点云。张晨光等[8]采用双目视觉技术进行奶牛图像采集,提取奶牛背部轮廓与侧面轮廓,通过SIFT算法,结合相机标定参数获取特征点空间坐标,最终利用欧式距离计算奶牛体高、体长和体宽。在基于三维点云的体尺测量方面,赵建敏等[9]使用双目相机采集体尺图像,利用YOLOv5检测牛体及牛头、躯干、牛蹄、牛尻、腿关节等特征部位,基于改进的Canny边缘检测算法及曲线拟合算法提取牛体局部边缘轮廓,通过U弦长得到体尺测量特征点,最终完成体高、体长、体斜长等体尺测量,该方法平均体尺测量误差为2.4%。Huang等[10]利用IFM O3D303相机获取秦川牛侧面点云数据,采用KD-Network训练牛体轮廓提取模型,通过快速点特征直方图获得特征表面中心完成体尺测量,该方法最大测量误差为2.0%。初梦苑等[11]使用Kinect DK深度相机拍摄奶牛侧面与俯视图像,基于视频错帧补全奶牛侧面点云,采用迭代最近点算法配准奶牛侧面点云与俯视点云,基于几何特征测量奶牛体直长、肩宽、臀宽等7种体尺参数。Yang等[12]使用智能手机环绕奶牛拍摄图像,通过运动结构法构造三维点云模型,根据形态特征自动标记体尺测量点,该方法体尺测量平均相对误差小于4.67%。基于三维点云的体尺测量方法提供了精确的测量,但计算量大、测量过程复杂、测量成本高,并且需要特定的环境条件,在规模化养殖场实现其快速准确体尺测量尚需进一步验证。相比之下,使用单个深度相机进行体尺测量具有计算负担低、测量设备部署简单和设备成本低等优点,更适合家禽家畜体尺参数的快速测量。

    测量关键点的快速准确检测是奶牛体尺快速准确测量的前提。Yin等[13]采用对猪只身体部位平均分割的方法定位测量关键点,并将点云姿态标准化,实现了体尺的自动测量。Hu等[14]通过PointNet++对不同姿势的猪只点云进行分割,根据几何特征定位猪体测量关键点,该方法最大体尺测量误差为5.26%。陆明洲等[15]利用图像处理技术获取山羊体尺关键点,测量最大相对误差为5.5%。本研究基于YOLOv8n-Pose快速准确获取测量关键点,利用双目立体视觉模型获取深度信息,完成奶牛体尺的快速准确测量。

    奶牛双目图像数据采集自陕西省咸阳市杨陵区官村奶牛养殖场与杨凌科元克隆股份有限公司奶牛养殖场,采集时间为2022年11月至2023年4月,包括奶牛侧面双目图像及视频数据,采用ZED 2i相机采集奶牛侧面图像。图像数据的图像分辨率为2 208像素×1 242像素,用于构建目标检测及关键点检测数据集;双目视频数据的视频分辨率为4 416像素×1 242像素,帧率为15 帧/s,用于最终体尺测量。图1为数据采集及数据集构建示意图,图1a为数据采集平台示意图,ZED 2i双目立体相机固定于相机支架上,距离地面约1.1 m,将相机支架置于奶牛侧面2~3 m处,拍摄奶牛侧面图像或采集视频数据,在采集过程中避免阳光直射相机,减少阳光直射对立体匹配的影响;图1b为通过采集平台采集单幅奶牛侧面图像,共采集1 895幅图像,按8∶2划分训练集与验证集,构建奶牛目标检测及关键点检测数据集;图1c为视频数据采集及体尺测量数据集构建示意图,将图1a所示的采集平台置于奶牛挤奶通道外2.5 m处采集奶牛在挤奶通道的侧面视频,并将采集的视频进行分帧,以2帧/s构建体尺测量数据集。

    图  1  数据采集与数据集构建示意图
    Figure  1.  Data acquisition and data set construction diagram

    本研究涉及奶牛体斜长、体高、臀高和尻长4项体尺测量。图2为奶牛体尺测量标准的示意图,奶牛体斜长近似为坐骨端(C)到肩端(D)的直线距离,体高为鬐甲部最高点(A)到前蹄与地面交点(E1)的直线距离,臀高为臀部最高点(B)到后蹄与地面交点(E2)的直线距离,尻长为坐骨端(C)到尻尖(F)的直线距离。在构建的目标检测及关键点检测数据集中标注鬐甲部、尻尖、坐骨端、肩端、蹄部等8个测量关键点。

    图  2  奶牛直线体尺测量标准
    A:鬐甲部最高点,B:臀部最高点,C:坐骨端,D:肩端,E1、E2:前、后蹄与地面的交点,F:尻尖;G:眼睛
    Figure  2.  Standard for linear body size measurement of dairy cow
    A: The highest point of wither; B: The highest point of hip; C: Ischial tuberosity; D: Point of shoulder; E1, E2: Contact points of the front and rear hooves with the ground; F: Hip; G: Eye

    奶牛体尺真实数据的准确获取是试验测试的前提,但由于手动测量体尺依赖于人工经验,存在较大的偶然误差与粗大误差,Hu等[14]采用PointNet++分割奶牛点云后获取奶牛体尺,与手动测量相比,体长、体高的平均偏差仅为2.34%,说明点云数据测量与手动测量相差少。Tran等[16]和Deris等[17]证实了ZED相机在点云三维重建与测量方面具有高精度的优势。因此,本研究采用ZED 2i相机采集奶牛侧面点云数据并依据手动测量的方法获取体尺的真实值。

    小孔成像模型是常用的相机模型,双目相机基于小孔成像模型,利用2个相机从不同角度同时拍摄,通过标定参数进行畸变矫正、极限矫正,根据拍摄点在左右图像中成像位置的差异,确定点在空间中的位置。根据文献[18],设计双目相机成像模型(图3),OlOr分别是双目立体相机左右相机的光心,olor分别是左右相机光轴与成像平面的交点,假设两成像平面宽度为W,成像平面与相机之间的距离为焦距fP是三维空间中的一个点,plpr是点P在左右相机成像平面上的像点,xlxrplprx坐标,zP到左右相机所在直线的距离,根据相似三角形可得公式(1):

    图  3  双目相机成像模型
    Ol:左相机光心;Or:右相机光心;ol:左相机光轴与成像平面交点;or:右相机光轴与成像平面交点;W:成像平面宽度;f:相机焦距;P:三维空间中某点;plpr为点P在左右相机成像平面上的像点;xlxrplprx坐标;zP到左右相机的距离;b:左右相机基线距离
    Figure  3.  Binocular camera imaging model
    Ol: Optical center of the left camera; Or: Optical center of the right camera; ol: Intersection point of the left camera’s optical axis with the imaging plane; or: Intersection point of the right camera’s optical axis with the imaging plane; W: Width of the imaging plane; f: Camera focal length; P: A point in three-dimensional space; pl and pr: Image points of P on the imaging planes of the left and right cameras; xl and xr: x-coordinates of pl and pr; z: Distance from P to the cameras; b: Baseline distance between the left and right cameras
    $$ \dfrac{{z - f}}{z} = \dfrac{{b - \left( {{x_{\mathrm{l}}} - \dfrac{1}{2}W} \right) - \left( {\dfrac{1}{2}W - {x_{\mathrm{r}}}} \right)}}{b}, $$ (1)

    式中,b为左右相机的基线距离。

    xlxr为视差(d),根据公式(1),则点P的深度为:

    $$ z = {{bf} \mathord{\left/ {\vphantom {{bf} d}} \right. } d}。 $$ (2)

    根据视差值(d),结合双目立体相机标定参数基线(b)和焦距(f)推导每个像素点在三维空间中的深度,进而推导出三维空间坐标。

    立体匹配是从一对图像中推断每个像素的深度信息。传统的立体匹配算法是将立体匹配问题转化为在左右两幅图像中寻找最相似的像素点的过程。相比传统立体匹配算法,基于深度学习的立体匹配方法具有更高的精度和更好的鲁棒性,能够处理复杂的场景[19]。因此,本研究采用CREStereo算法[20]对奶牛双目图像进行立体匹配获取视差值。图4为CREStereo算法立体匹配推理过程,推理网络采用堆叠级联架构,在保证鲁棒性的基础下,保留高分辨率输入的细节,利用循环更新模块(Recurrent update module,RUM)处理实际应用中的非理想矫正情况,尽可能地缓解下采样过程中区域的特征退化。RUM采用循环架构,逐步更新和细化深度图,通过多次迭代整合上下文信息,提高视差计算的整体精度。

    图  4  CREStereo立体匹配
    Figure  4.  CREStereo stereo matching

    本文基于YOLOv8n-Pose估计网络、SimAM注意力机制[21]及CoordConv卷积[22]改进网络,提出适用于奶牛关键点检测的姿态估计模型。其中YOLOv8n-Pose网络是基于YOLOv8及YOLO-Pose估计网络而提出的多任务联合学习网络,能够同时实现目标分类及姿态估计任务。图5为改进的YOLOv8n-Pose估计网络。

    图  5  改进的YOLOv8n-Pose估计网络
    Figure  5.  Improved YOLOv8n-Pose estimation network

    SimAM注意力模块是Yang等[21]基于神经科学理论,受人脑注意力机制的启发,提出的一种3D注意力模块,SimAM注意力机制通过构建一个优化能量函数来挖掘神经元的重要性以计算注意力权重,公式(3)为能量函数(et):

    $$\begin{split} {e_t}\left( {{w_t},{b_t},y,{x_i}} \right) = & \dfrac{1}{{M - 1}} \displaystyle\sum \limits_{i = 1}^{M - 1} {\left[ { - 1 - \left( {{w_t}{x_i} + {b_t}} \right)} \right]^2} +\\ & {\left[ { - 1 - \left( {{w_t}t + {b_t}} \right)} \right]^2} + \lambda {w_t}^2\text{,} \end{split} $$ (3)

    式中,t为输入特征的目标神经元;λ为正则化系数;i为空间维度索引号;xi为其他神经元;M为通道上所有神经元的个数;y为标签值,用于确定该神经元是否为重要神经元;wt为权重;bt为偏置。根据公式(3),推导最小能量函数如公式(4):

    $$ e_t^* = \dfrac{{4\left( { {{\hat \sigma ^2}} + \lambda } \right)}}{{{{\left( {t - \hat u} \right)}^2} + 2{{\hat \sigma }^2} + 2\lambda }}, $$ (4)

    式中,û为输入特征t的均值,${\hat \sigma ^2}$为输入特征t的方差。

    由公式(4)可知,能量越低,特征相关的神经元(t)与周围神经元区别越大,重要程度越高,则神经元重要性为1/et*

    本研究增加SimAM,位置如图5 Backbone部分所示,SimAM注意力模块嵌入在C2f与SPPF之间,以观察整个Backbone中的重要神经元,增强重要特征,抑制其他神经元,从而聚焦于更有利于奶牛关键点检测的特征表示。

    CoordConv卷积是由Liu等[22]开发的卷积方法,旨在提高神经网络对坐标信息的感知能力。图6为CoordConv结构,在传统的卷积神经网络中,通过1个拼接操作在通道维度上引入2个额外的通道,这2个通道分别包含x坐标(j)和y坐标(i)的信息。CoordConv显著提升了模型对空间布局的理解能力,使得网络能够更有效地处理具有明确空间关系的任务。在本研究中,参考PP-YOLO[23]网络,如图5 Head部分所示,在YOLOv8网络的Head部分引入2层卷积核大小为1×1的CoordConv卷积层,旨在增强网络对奶牛空间坐标的感知,从而提升目标检测及关键点检测的性能。

    图  6  CoordConv结构
    h:输入特征的高度;w:输入特征的宽度;c:输入特征图通道数;i:特征的x坐标信息;j:特征的y坐标信息;h′:输出特征的高度;w′:输出特征的宽度;c′:输出特征图通道数
    Figure  6.  CoordConv structure
    h: Height of input features; w: Width of input features; c: Number of channels in input feature map; i: x-coordinate information of features; j: y-coordinate information of features; h′: Height of output features; w′: Width of output features; c′: Number of channels in output feature map

    本研究中,奶牛直线体尺自动测量算法分为以下5个步骤:

    1)利用双目相机拍摄奶牛侧面图像,并进行立体校正;

    2)采用CREStereo算法对奶牛双目图像立体匹配,并计算左目图像深度信息;

    3)采用改进YOLOv8n-Pose检测奶牛左目图像中的关键点,并分别计算每头奶牛目标检测及关键点检测置信度,优先选择关键点检测置信度高的奶牛作为最优体尺测量目标;

    4)结合双目相机参数与左目图像深度信息,将奶牛关键点映射至三维空间中;

    5)完成奶牛体斜长、体高、臀高和尻长指标的测量。

    为计算奶牛体尺,需将关键点像素坐标映射到相机坐标系或世界坐标系下,采用相机坐标系作为三维空间坐标系,以减少因相机标定不准确及坐标变换对精度的影响。假设由步骤3)改进的YOLOv8n-Pose模型进行奶牛关键点检测后,奶牛鬐甲部最高点像素坐标为(uA, vA),臀部为(uB, vB),坐骨端为(uC, vC),肩端为(uD, vD),奶牛前、后蹄与地面交点为(uE1, vE1)和(uE2, vE2),尻尖为(uF, vF)。根据公式(2)得到对应的相机坐标为公式(5):

    $$ \left\{ {\begin{array}{*{20}{c}} {{X'_{\mathrm{C}}} = \left( {u - {c_x}} \right) \times {Z'_{\mathrm{C}}}/{f_x}} \\ {{Y'_{\mathrm{C}}} = \left( {v - {c_y}} \right) \times {Z'_{\mathrm{C}}}/{f_y}} \end{array}} \right., $$ (5)

    式中,(u, v)为图像坐标系的像素坐标,(${X'_{\mathrm{C}}} $, ${Y'_{\mathrm{C}}} $, ${Z'_{\mathrm{C}}} $)为像素坐标对应相机坐标系的坐标,fx为相机在水平方向的焦距,fy为相机在垂直方向的焦距。

    关键点像素坐标经公式(5),可映射到三维坐标系中,根据欧氏距离计算奶牛体斜长如公式(6):

    $$ {l}_{体斜长}=\sqrt{{\left({X}_{\rm{C}}-{X}_{\rm{D}}\right)}^{2}+{\left({Y}_{\rm{C}}-{Y}_{\rm{D}}\right)}^{2}+{\left({Z}_{\rm{C}}-{Z}_{\rm{D}}\right)}^{2}} \text{,} $$ (6)

    式中,(XC, YC, ZC)为坐骨端坐标,(XD, YD, ZD)为肩端坐标。

    奶牛体高计算方法为鬐甲部最高点到地面距离,具体计算方式如公式(7):

    $$ {h}_{体高}=\sqrt{{\left({X}_{\rm{A}}-{X}_{{\rm{E}}1}\right)}^{2}+{\left({Y}_{\rm{A}}-{Y}_{{\rm{E}}1}\right)}^{2}+{\left({Z}_{\rm{A}}-{Z}_{{\rm{E}}1}\right)}^{2}} \text{,} $$ (7)

    式中,(XA, YA, ZA)为鬐甲部最高点坐标,(XE1, YE1, ZE1)为蹄部与地面交点坐标。

    臀高为奶牛尻尖到地面的垂直距离,具体计算方式如公式(8):

    $$ {h}_{臀高}=\sqrt{{\left({X}_{\rm{B}}-{X}_{{\rm{E}}2}\right)}^{2}+{\left({Y}_{\rm{B}}-{Y}_{{\rm{E}}2}\right)}^{2}+{\left({Z}_{\rm{B}}-{Z}_{{\rm{E}}2}\right)}^{2}} \text{,} $$ (8)

    式中,(XB, YB, ZB)为臀部最高点坐标,(XE2, YE2, ZE2)为蹄部与地面交点坐标。

    尻长为坐骨端与尻尖的直线距离,具体计算方式如公式(9):

    $$ {l}_{尻长}=\sqrt{{\left({X}_{\rm{C}}-{X}_{\rm{F}}\right)}^{2}+{\left({Y}_{\rm{C}}-{Y}_{\rm{F}}\right)}^{2}+{\left({Z}_{\rm{C}}-{Z}_{\rm{F}}\right)}^{2}} \text{,} $$ (9)

    式中,(XF, YF, ZF)为尻尖坐标。

    为探究2~3 m不同距离的双目立体匹配结果,选用5头奶牛在距离2~3 m处进行立体匹配,图7为不同距离下立体匹配结果,表1为不同距离的体尺手动点云测量与人工测量的相对误差。可见,在2~3 m深度范围内CREStereo方法能正确地从ZED 2i拍摄的奶牛双目图像中估算深度信息,满足奶牛体尺测量要求,但在实际测量中为避免距离过近导致的信息缺失和距离过远造成的图像质量下降,应保证奶牛位于在双目图像中央完整且占据图像主体的距离。

    图  7  不同距离立体匹配结果
    Figure  7.  Results of stereo matching at different distances
    表  1  不同距离下手动点云测量与人工测量奶牛体尺的相对误差
    Table  1.  Relative errors of manual point clouds measurement compared to manual measurement of dairy cows body size at different distances %
    距离/m
    Distance
    体高
    Body height
    体斜长
    Body length
    臀高
    Hip height
    尻长
    Rump length
    2.00 3.01 2.87 2.96 5.00
    2.25 2.85 2.81 2.98 4.52
    2.50 2.77 2.74 2.67 3.26
    2.75 2.62 2.62 2.55 2.73
    3.00 2.81 2.75 2.67 2.66
    下载: 导出CSV 
    | 显示表格

    本文提出的改进的YOLOv8n-Pose模型在GPU计算服务器训练的硬件配置为Intel(R) Xeon(R) Platinum 8255C CPU @ 2.50 GHz 12核、RTX 3090 24 GB、内存为43 GB;软件环境为Ubuntu18.04、Python3.8、PyTorch1.8.1、Cuda11.1;网络训练初始学习率为0.001,周期学习率为0.02,采用Adam优化器。

    为了验证SimAM注意力机制和CoordConv卷积在奶牛关键点检测上的作用,以YOLOv8n-Pose模型为基础,设计消融试验验证改进效果,图8为消融试验结果。在YOLOv8n-Pose中分别添加SimAM机制和CoordConv后,重叠度(Intersection over union,IoU)阈值为50%的平均精确度均值(mAP50)和IoU阈值为50%~95%的平均精确度均值(mAP50~95)均有所提高,最终网络较原网络目标检测mAP50~95提高了1.1个百分点(图8a),关键点检测mAP50~95提高了4.5个百分点(图8b)。

    图  8  消融试验测试YOLOv8n-Pose的改进效果
    mAP50:重叠度(Intersection over union,IoU)阈值为50%的平均精确度均值;mAP50~95:IoU为50%~95%的平均精确度均值
    Figure  8.  Improvement effect of YOLOv8n-Pose tested by ablation experiment
    mAP50: Mean average precision at 50% intersection over union (IoU) threshold; mAP50−95: Mean average precision across IoU threshold from 50% to 95%

    表2为消融试验模型参数量与计算量的对比结果,从表2可以看出,最终改进模型的参数量仅增加了0.34%,而运算量降低了1.18%。

    表  2  通过消融试验比较模型改进前后的参数量与计算量
    Table  2.  Parameters and operations comparisons before and after model improvements through ablation tests
    模型
    Model
    层数
    Layers
    参数量/M
    Parameters
    运算量/G
    Operations
    YOLOv8n-Pose1872.988.5
    YOLOv8n-Pose+SimAM1893.018.6
    YOLOv8n-Pose+CoordConv1953.018.5
    YOLOv8n-Pose+SimAM+CoordConv1972.998.4
    下载: 导出CSV 
    | 显示表格

    为检验改进后模型的关键点检测性能,利用测试集验证改进的YOLOv8n-Pose模型,图9为模型在不同复杂情景下的奶牛关键点检测结果。如图9a为奶牛侧面存在遮挡时的检测结果,图9b为不同奶牛品种的检测结果,图9c为多目标奶牛检测结果;改进后的模型在多种复杂因素影响下均可较好地完成奶牛关键点检测任务。

    图  9  改进后的YOLOv8n-Pose在不同情景下的检测结果
    Figure  9.  Detection results of the improved YOLOv8n-Pose in different scenarios

    为客观地衡量改进的YOLOv8n-Pose性能,与Hourglass[24]、HRNet[25]、SimCC[26]和RTMpose[27]等其他优秀算法比较,各算法使用相同数据集和软硬件环境,表3为对比结果。本文提出的改进YOLOv8n-Pose的精度最高,且模型参数量和浮点运算量均表现优秀。

    表  3  不同算法关键点检测结果对比
    Table  3.  Comparison of key point detection results by different algorithms
    方法
    Method
    网络骨干
    Backbone
    图像尺寸/像素
    Image size
    参数量/M
    Parameters
    计算量/G
    Operations
    平均精确度均值/%
    Mean average precision
    平均召回率/%
    Average recall
    模型大小/MB
    Model size
    Hourglass Hourglass-52 384 94.85 64.48 85.9 88.2 362.0
    SimCC HRNet-w32 384 × 288 28.54 17.33 89.3 91.4 110.0
    HRNet HRNet-w48 384 × 288 63.60 35.48 89.5 92.2 244.0
    RTMpose-m CSPNeXt-P5 256 × 192 13.25 1.90 92.5 94.7 101.0
    改进YOLOv8n-Pose
    Improved YOLOv8n-Pose
    CSPDarknet-P5 640 2.99 8.40 94.3 98.2 6.2
    下载: 导出CSV 
    | 显示表格

    在拍摄的15头奶牛的双目视频中分别选取5帧站立视频,计算体尺平均值作为测量值。图10为体尺测量最优目标判断结果,图10a为单头奶牛且环境较暗,图10b为两头奶牛,图10c多头奶牛且相互遮挡,图10d为多头奶牛且被栏杆遮挡。

    图  10  奶牛体尺测量最优目标选择
    Figure  10.  Optimal target selection for body size measurement of dairy cows

    表4为15头奶牛的体尺测量结果,测量值为本文提出的奶牛体尺测量方法的平均测量结果,真实值为通过点云数据手动平均测量结果。

    表  4  15头奶牛的体尺测量结果
    Table  4.  Body size measurement results of 15 dairy cows
    编号
    Code
    体斜长/cm Body length体高/cm Body height臀高/cm Hip height尻长/cm Rump length
    测量值
    Measured
    真实值
    True
    测量值
    Measured
    真实值
    True
    测量值
    Measured
    真实值
    True
    测量值
    Measured
    真实值
    True
    1169.56165.91147.29151.92157.31159.1945.4547.78
    2172.35170.61135.24135.14146.82141.4654.0651.19
    3167.93171.47152.99154.52157.03158.4458.8456.92
    4163.25160.63146.40145.99148.92148.1646.4649.56
    5162.10165.91140.63143.59150.46152.3550.0554.77
    6176.91171.69135.27144.74155.02148.1851.4854.12
    7170.31172.68150.45147.24146.01148.9254.2255.69
    8175.99178.13154.96159.60143.14153.8356.2358.59
    9178.34171.91146.60146.08148.84151.0957.6956.73
    10171.47175.43138.61152.57141.76154.1059.1657.35
    11174.62174.09151.92153.80152.05150.6061.9361.52
    12169.25172.57156.13153.88138.83152.7456.0453.23
    13175.21172.34151.94156.04154.99152.9051.7151.95
    14179.81184.20158.55159.31160.85158.0952.7957.39
    15168.69167.72145.67148.28148.95150.3755.2453.38
    下载: 导出CSV 
    | 显示表格

    利用箱线图分析各项体尺的相对误差,图11为体尺测量相对误差箱线图,其中体斜长相对误差最小,臀高相对误差最大。体斜长的最大相对误差为3.74%,平均相对误差为1.84%,平均绝对误差为3.2 cm;体高的最大相对误差为6.54%,平均相对误差为2.34%,平均绝对误差为3.5 cm;臀高的最大相对误差为9.11%,平均相对误差为2.98%,平均绝对误差为4.5 cm;尻长的最大相对误差为8.62%,平均相对误差为4.19%,平均绝对误差为2.3 cm。分析误差来源,主要如下:1)在奶牛关键点检测数据集中,部分奶牛轮廓不明显或标注不规范,导致奶牛关键点检测存在一定偏差;2)双目相机在实际使用中存在一定的畸变,奶牛深度信息计算的偏差导致体尺测量偏差。

    图  11  体尺测量相对误差箱线图
    IQR:四分位距;25%~75%:数据的中间50%,从数据的第1四分位数到第3四分位数的范围;1.5IQR范围:从第1四分位数减去1.5倍IQR到第3四分位数加上1.5倍IQR,超出此范围的点为异常值
    Figure  11.  Box diagram of relative error of body size measurement
    IQR: Interquartile range; 25%−75%: The middle 50% of the data, which ranges from the first quartile to the third quartile; 1.5IQR range: Extending from the first quartile minus 1.5 times IQR to the third quartile plus 1.5 times IQR, points outside this range are considered as outliers

    基于YOLOv8n-Pose模型,通过引入SimAM注意力机制和CoordConv卷积,提出了改进的YOLOv8n-Pose奶牛关键点检测模型,模型检测精度为94.30%,参数量为2.99 M,计算量为8.40 G,视频平均检测速度为55.6帧/s;相比于原网络,有着更好的精度,更小的计算量,更适合奶牛养殖场实际的部署与应用。本研究融合CREStereo立体匹配与改进的YOLOv8n-Pose,提出一种奶牛体尺测量方法,利用CREStereo对奶牛双目图像立体匹配计算视差值,利用改进的YOLOv8n-Pose检测左目图像中奶牛关键点,结合双目相机标定参数将奶牛关键点像素坐标转换至空间坐标,通过计算关键点间的欧氏距离完成奶牛体尺自动测量,体尺测量最大平均相对误差为4.19%。

  • 图  1   4ZZX-48型甘蔗收割机

    1:架,2:夹持橡胶块,3:夹持输送链轮,4:甘蔗切割刀盘,5:夹持输送链条,6:夹持点位置,7:收割机支撑轮,8:甘蔗导向杆,9:驱动拖拉机

    Figure  1.   Type 4ZZX-48 sugarcane harvester

    1:Frame,2:Clamping rubber block,3:Clamping conveyor sprocket,4:Sugarcane cutter,5:Clamping conveyor chain,6:Clamping point,7:Supporting wheel of sugarcane harvester,8:Guide rod for sugarcane,9:A tractor as power

    图  2   剥叶装置

    1:驱动马达,2:下剥叶辊筒架,3:下剥叶辊筒,4:下立柱,5:联轴器,6:轴承,7:上剥叶辊筒,8:上立柱,9:上剥叶辊筒架

    Figure  2.   Leaf stripping device

    1:Drive motor,2:Lower shelf of leaf stripping roller,3:Lower leaf stripping roller,4:Lower column,5:Coupling,6:Bearing,7:Upper leaf stripping roller,8:Upper column,9:Upper shelf of leaf stripping roller

    图  3   剥叶刷示意图

    Figure  3.   Stripping leaf brush

    图  4   剥叶装置安装位置

    Figure  4.   Installation site of leaf stripping device

    图  5   ɑβγ 角度关系示意图

    Figure  5.   The relationship of ɑβ and γ

    图  6   剥叶区间位置

    Figure  6.   Leaf stripping interval position

    图  7   样本容量标定

    Figure  7.   Calibration of sample size

    图  8   转速比与剥净率的拟合曲线

    Figure  8.   Fitting curve of rotation speed ratio and stripping rate

    表  1   链轮转速与链条线速度对应关系表

    Table  1   The relationship between sprocket speed and chain-line speed

    链轮转速/(r·min)
    Sprocket speed
    60 90 120 150 180
    输送链速度/(m·s–1)
    Chain-line speed
    0.57 0.86 1.14 1.43 1.71
    下载: 导出CSV

    表  2   收割机前进速度与喂入率对应关系表

    Table  2   The relationship between harvester speed and feeding rate

    收割机前进速度/(m·s–1)
    Harvester speed
    0.3 0.4 0.5 0.6 0.7
    甘蔗喂入率/(kg·s–1)
    Feeding rate of sugarcane
    4.5 6.0 7.5 9.0 10.5
    下载: 导出CSV

    表  3   双因素试验安排表

    Table  3   Schedule of double factor test r·min–1

    水平Level 输送链轮转速
    Speed of conveying sprocket
    剥叶辊筒转速
    Speed of leaf roller
    1 60 120
    2 120 240
    3 180 360
    下载: 导出CSV

    表  4   不同夹持输送链轮转速水平的剥净率和方差分析结果

    Table  4   The results of stripping rates of different speed levels and variance analysis

    项目 Item 60 r·min–1 90 r·min–1 120 r·min–1 150 r·min–1 180 r·min–1
    剥净率/% Stripping rate 76.0 74.0 72.1 68.1 50.5
    标准误/% Standard error 3.9 1.8 1.1 1.5 5.7
    变异来源 Variation source SS DF MS F P
    组间 Between groups 0.126 4 0.032 9.649 0.002
    组内 Within groups 0.033 10 0.003
    总计 Total 0.159 14
    下载: 导出CSV

    表  5   不同剥叶辊筒安装角度水平的剥净率和方差分析结果

    Table  5   The results of stripping rates of different installation angles and variance analysis

    项目 Item 15° 30°
    剥净率/%
    Stripping rate
    70.6 70.8 71.6
    标准误/%
    Standard error
    1.57 1.64 3.81
    变异来源
    Variation source
    SS DF MS F P
    组间 Between groups 0.000 2 0.000 0.047 0.954
    组内 Within groups 0.012 6 0.002
    总计 Total 0.012 8
    下载: 导出CSV

    表  6   不同剥叶辊筒转速水平的剥净率和方差分析结果

    Table  6   The results of stripping rates of different roller speeds and variance analysis

    项目 Item 120 r·min–1 180 r·min–1 240 r·min–1 300 r·min–1 360 r·min–1
    剥净率/% Stripping rate 67.6 75.9 76.6 76.9 81.1
    标准误/% Standard error 1.75 1.66 2.60 2.60 2.66
    变异来源 Variation source SS DF MS F P
    组间 Between groups 0.029 4 0.007 4.574 0.023
    组内 Within groups 0.016 10 0.002
    总计 Total 0.045 14
    下载: 导出CSV

    表  7   不同喂入率的剥净率和方差分析结果

    Table  7   The results of stripping rates of different feeding rates and variance analysis

    项目
    Item
    4.5 kg·s–1 7.5 kg·s–1 10.5 kg·s–1
    剥净率/%
    Stripping rate
    73.8 68.5 64.5
    标准误/%
    Standard error
    2.12 1.21 2.31
    变异来源
    Variation source
    SS DF MS F P
    组间 Between groups 0.013 2 0.007 5.782 0.040
    组内 Within groups 0.007 6 0.001
    总计 Total 0.020 8
    下载: 导出CSV

    表  8   双因素试验的剥净率和方差分析结果

    Table  8   The results of stripping rates of double factor test and variance analysis

    输送链轮转速(n1)/(r·min–1)
    Speed of conveying sprocket
    不同剥叶辊筒转速(n2)的剥净率(n2)/%
    Stripping rate at different speed of leaf roller
    120 r·min–1 240 r·min–1 360 r·min–1
    60 70.60 75.20 76.60
    120 66.10 71.00 74.00
    180 52.60 67.40 67.70
    变异来源 Variation source SS DF MS F P
    修正模型 Corrected model1) 0.135 8 0.017 9.397 0.000
    截距 Intercept 12.957 1 12.957 7.236E3 0.000
    n1 0.070 2 0.035 19.536 0.000
    n2 0.054 2 0.027 15.060 0.000
    n1×n2 0.011 4 0.003 1.497 0.245
    误差 Error 0.032 18 0.002
    合计 Total 2) 13.1242) 27
     1) R2=0.807(修正R2=0.721);2) 修正合计SS为0.167,DF 为26
     1) R2=0.807(Adjusted R2=0.721);2) Corrected total SS was 0.167,DF was 26
    下载: 导出CSV

    表  9   转速比与剥净率关系

    Table  9   The relationship between speed ratio and stripping rate

    转速比(n2/n1) Rotation speed ratio 0.7 1.0 1.3 2.0 2.4 3.0 4.0 5.0 6.0
    剥净率/% Stripping rate 52.5 64.2 67.4 62.5 68.1 73.4 75.2 76.9 77.9
    下载: 导出CSV

    表  10   转速比与剥净率相关分析1)

    Table  10   Correlation analysis between rotation speed ratio and stripping rate

    模型 Model R2 F DF1 DF2 P 常量 Constant b1 b2
    一元线性 Linear 0.573 33.541 1 25 0.000 0.586 0.037
    二次多项式 Quadratic 0.632 20.602 2 24 0.000 0.526 0.090 –0.008
     1) 自变量为转速比
     1) The independent variable was rotation speed ratio
    下载: 导出CSV
  • [1] 刘芳建, 杨学军, 刘赟东, 等. 我国整秆式甘蔗剥叶机械研究现状及思考[J]. 农机化研究, 2013, 35(10): 238-241. doi: 10.3969/j.issn.1003-188X.2013.10.060
    [2] 刘正龙. 甘蔗机械剥叶原理分析与新款机型构思[J]. 农机科技推广, 2013(2): 50-51. doi: 10.3969/j.issn.1671-3036.2013.02.024
    [3] 张威, 周新民, 邓道路, 等. 适用于云南山区小型整秆式甘蔗剥叶机的设计[J]. 企业技术开发, 2011(10): 11-12.
    [4] 程绍明, 王俊, 王永维. 我国整秆式甘蔗联合收割机的现状和问题[J]. 现代农业科技, 2013(20): 193-194. doi: 10.3969/j.issn.1007-5739.2013.20.122
    [5] 解福祥, 区颖刚, 刘庆庭, 等. 侧悬挂推倒式整秆甘蔗收获机设计与试验[J]. 农业机械学报, 2011, 42(S1): 26-29.
    [6] 刘庆庭, 莫建霖, 区颖刚, 等. 我国整秆与切段2种甘蔗收获方式发展历程与前景分析[J]. 甘蔗糖业, 2013(6): 45-55. doi: 10.3969/j.issn.1005-9695.2013.06.010
    [7] 肖宏儒, 王明友, 宋卫东, 等. 整秆式甘蔗联合收获机降低含杂率的技术改进与试验[J]. 农业工程学报, 2011, 27(11): 42-45. doi: 10.3969/j.issn.1002-6819.2011.11.008
    [8] 刘芳建, 狄明利, 米义, 等. 甘蔗逆剥剥叶方式的试验研究[J]. 农机化研究, 2015, 37(1): 174-176.
    [9] 牟向伟, 区颖刚, 吴昊, 等. 甘蔗叶鞘在弹性剥叶元件作用下破坏高速摄影分析[J]. 农业机械学报, 2012, 43(2): 85-89. doi: 10.6041/j.issn.1000-1298.2012.02.018
    [10]

    DEUGAN J. Dynamic mechanical properties of sugarcane[C]//ZHANG J, TAN H H. Proceedings of 2013 2nd International Conference on Mechanical Properties of Materials and Information Technology(ICMPMIT 2013). Hong Kong: Information Engineering Research Institute, 2013: 321-325.

    [11] 牟向伟. 弹性齿对甘蔗茎秆的动态打击力与叶鞘剥离机理研究[J]. 农业机械学报, 2015, 46(3): 103-109.
    [12] 牟向伟, 黄煜, 万理, 等. 甘蔗整秆剥叶关键技术与剥叶机理研究[J]. 农机化研究, 2013, 35(11): 13-17. doi: 10.3969/j.issn.1003-188X.2013.11.003
    [13]

    YANG N J. Research on integrated design platform of sugarcane harvester[C]//IEEE. Measuring technology and mechatronics automation (ICMTMA 2010). Beijin: IEEE, 2010: 252.

    [14] 李炅, 林茂, 王伟, 等. 甘蔗剥叶机含杂率试验研究[J]. 机械设计与制造, 2017(4): 144-147. doi: 10.3969/j.issn.1001-3997.2017.04.037
    [15] 张增学. 梳刷式甘蔗剥叶机剥叶机理的试验研究[D]. 广州: 华南农业大学, 2002.
    [16] 蒙艳玫, 刘正士, 李尚平, 等. 甘蔗收获机械排刷式剥叶元件虚拟试验分析[J]. 农业机械学报, 2003, 34(4): 43-46. doi: 10.3969/j.issn.1000-1298.2003.04.013
    [17] 牟向伟, 区颖刚, 刘庆庭, 等. 甘蔗叶鞘剥离过程弹性齿运动分析与试验[J]. 农业机械学报, 2014, 45(2): 122-129.
    [18]

    LAI X, LIANG S, LIU D M, et al. Virtual simulation analysis and experiment study on a new peel scratch relieving design of sugarcane leaf cleaning device[C]//IEEE. Measuring Technology and Mechatronics Automation. Beijin: IEEE, 2009: 499-500.

    [19] 牟向伟, 区颖刚, 刘庆庭, 等. 弹性齿滚筒式甘蔗剥叶装置[J]. 农业机械学报, 2012, 43(4): 60-65. doi: 10.6041/j.issn.1000-1298.2012.04.013
    [20] 黎毓鹏, 郑广平, 宋咏春, 等. 小型甘蔗剥叶机的试验与研究[J]. 装备制造技术, 2010(2): 14-15. doi: 10.3969/j.issn.1672-545X.2010.02.006
    [21] 王光炬, 乔艳辉, 吕勇. 甘蔗剥叶机理研究[J]. 山东农业大学学报(自然科学版), 2007, 38(3): 461-464. doi: 10.3969/j.issn.1000-2324.2007.03.030
    [22] 孔林, 周德俭, 谌炎辉. 新型小型甘蔗剥叶机剥叶机构设计与优化[J]. 中国农机化学报, 2015, 36(2): 124-127.
    [23] 黄深闯, 杨望, 杨坚, 等. 甘蔗茎秆–蔗叶系统有限元建模方法研究[J]. 农机化研究, 2018, 40(6): 19-23. doi: 10.3969/j.issn.1003-188X.2018.06.004
    [24] 王华准, 方卫山, 牛宪伟, 等. 轮式拖拉机驱动型甘蔗剥叶机研究开发[J]. 现代农业装备, 2017(2): 31-35. doi: 10.3969/j.issn.1673-2154.2017.02.011
    [25] 刘志华, 林茂. 甘蔗收割机剥叶元件的优化研究[J]. 机械设计与制造, 2015(2): 253-256. doi: 10.3969/j.issn.1001-3997.2015.02.068
    [26] 王伟, 林茂. 甘蔗剥叶元件的运动参数试验分析[J]. 机械设计与制造, 2016(4): 203-206. doi: 10.3969/j.issn.1001-3997.2016.04.053
图(8)  /  表(10)
计量
  • 文章访问数:  1589
  • HTML全文浏览量:  9
  • PDF下载量:  1464
  • 被引次数: 0
出版历程
  • 收稿日期:  2018-07-01
  • 网络出版日期:  2023-05-17
  • 刊出日期:  2019-05-09

目录

/

返回文章
返回