荔枝采摘装置研究现状与发展趋势
2024-12-31许东霞刘华锋何建林
摘 要: 随着农业科技的不断进步,农作物采摘装置的研究日益受到关注。荔枝作为一种热带水果,具有较脆嫩的果实和复杂的树冠结构,传统的人工采摘方式存在效率低和劳动强度大等问题。开发高效、智能的荔枝采摘装置对于提高采摘效率、减轻劳动负担具有重要意义。综述了荔枝采摘装置研究现状,并对发展趋势进行了展望。
关键词:荔枝;采摘装置;收获机械;智能化;水果收获;机器视觉;机械臂
中图分类号:S225 文献标识码:A 文章编号:2095-1795(2024)09-0023-04
DOI:10.19998/j.cnki.2095-1795.2024.09.004
0 引言
荔枝具有丰富的营养价值和独特的口感,广受消费者喜爱。无论是种植面积还是产量,我国荔枝均居世界首位,尤其是广东省、广西壮族自治区和海南省等省(自治区)的农户依靠荔枝种植实现了增收致富、乡村振兴[1-4]。然而,荔枝的采摘过程需要大量人工参与,劳动强度大且效率低。传统的荔枝采摘方式主要依靠人工爬树和使用长竹竿进行摘果,存在许多问题,如工作效率低、劳动强度大、易损坏果实等。因此,急需研发一种高效、智能的荔枝采摘装置。
1 研究现状
目前,荔枝采摘装置研究主要集中在机械臂、机器视觉、智能算法、图像处理和定位技术等方面。
1.1 机械臂
机械臂是荔枝采摘装置的核心组成部分,负责实现精准的采摘动作。机械臂研究主要包括机械结构设计、运动控制、力觉传感器和末端执行器等方面。设计合理的机械结构和灵巧的运动控制算法,可以使机械臂准确地定位并采摘荔枝果实。同时,力觉传感器可以实现对果实的触摸力反馈,确保采摘过程中不会损坏果实。谢石璞[5] 为优化调节农业采摘机械臂结构尺寸,降低机械臂功耗,提高采摘效率及续航能力,搭建了采摘机械臂机构优化模型,并采用哈里斯鹰算法对农业采摘机械臂结构最优尺寸进行了求解,可为机械臂后续的设计工作提供指导。张志红[6] 设计了一种6 自由度、关节运动灵活且可更换的采摘机器人机械臂。董文[7] 设计了一种能够在特定环境中使用的4 自由度果蔬采摘机器臂。胡宏康[8] 提出了一种剪叉式可伸缩采摘机械臂,适用于高挂水果的采摘工作。贺敬梓[9] 使用3ds Max 创建了荔枝采摘机器人的机器臂、末端执行器,以及双目视觉摄像头和Kinect 设备的几何模型。
1.2 机器视觉
机器视觉技术在荔枝采摘装置中起到了关键作用,主要用于荔枝果实的检测和定位。通过采集摄像头图像,结合图像处理技术,可以实现对果实的特征提取和识别。同时,机器视觉也用于对果实的成熟度和质量进行评估,以确保采摘的果实品质。李志海等[10] 针对荔枝采摘器各组成部分进行分析,指出在视觉系统中,荔枝果实和果梗的准确识别和精准定位是一大难题,需要合理选择相机、镜头,并合理布置其位置,同时不断改进识别和定位算法。李伯阳[11] 基于机器视觉的梳摆式荔枝采摘机研究,如图1 所示,验证试验结果表明,所提出的果实识别模型可以适应果园复杂环境的识别要求。王新科等[12] 将计算机视觉处理技术有效应用至采摘机器人设计改进,为类似农业采摘与收获装备开发研究提供创新及借鉴思路。李臣杰[13] 为了解决采摘机器人识别目标果实难的问题,提出了一种基于机器视觉及深度学习的采摘机器人目标识别技术,试验结果证实了该方法的可行性,对采摘机器人研究具有一定的参考价值。焦迎雪等[14] 在采摘机器人体系结构的基础上,提出了一种基于机器视觉的夜间识别与定位方法,通过仿真验证了该方法的可行性。
1.3 智能算法
智能算法是荔枝采摘装置中的关键技术之一,在荔枝采摘装置中主要用于路径规划和运动控制优化。路径规划算法可以根据荔枝树枝的分布,确定最优采摘路径,以提高采摘效率。运动控制优化算法可以提高机械臂的定位精度和运动稳定性,以确保果实的安全采摘和机械装置的可靠运行。使用智能算法,可以实现对荔枝果实成熟度、大小和位置的准确判断,并实现自动化的采摘控制。刘力维[15] 基于RRT 算法研究了对采摘机械臂运动轨迹的控制方法,构建了采摘机械臂运动控制与目标抓取系统。莫宇达等[16] 使用基于Sylvester 方程变形的手眼标定方法标定的视觉荔枝采摘机器人,如图2 所示,在野外环境下,总体采摘成功率达到76.5%,视觉系统成功识别、定位采摘点的情况下,采摘成功率达92.3%。杨旭海等[17] 介绍了近年来国内外具有代表性的采摘机械臂路径规划算法,重点分析各类路径规划算法应用在采摘作业时的优缺点,通过对比,系统地总结各类算法的可行性、适用性及局限性。王娜等[18] 为了提高采摘机器人机械手移动的自动化程度,使其在移动过程中有效避开障碍物,将基于PID 控制器的避障系统引入机械手的设计上,并采用遗传算法和模糊算法对控制器进行优化,提高了机械手移动的准确性和平稳性。随着5G 技术的发展和应用,基于数字孪生技术的虚拟果园成为智慧果园管理的新模式。姚书杰等[19] 通过虚拟试验平台设置不同的采摘场景,仿真分析获取优化的采摘决策,可预测采摘机器人的真实作业性能,降低采收作业成本。
1.4 图像处理
图像处理是机器视觉的核心技术之一,用于对采集的图像进行预处理和分析。图像预处理可用于去除噪声、增强图像对比度和亮度等,以提高果实的检测和定位精度。而图像分析则通过边缘检测、图像分割和形态学处理等技术,对果实的形状、大小和颜色等特征进行提取和分析。田鑫裕[20] 进行了基于计算机视觉的荔枝果树检测及树冠分割方法研究。熊俊涛等[21]研究了夜间自然环境下荔枝采摘机器人识别技术,该算法对夜间荔枝的识别有较好的准确性和实时性,为荔枝采摘机器人的视觉定位方法提供了技术支持。黎施欣等[22] 分析了果蔬成熟度自动监测对发展智慧农业的重要意义,对图像处理与识别技术在监测果蔬成熟度领域的研究与应用现状进行综述、总结与展望 。
1.5 定位技术
定位技术是荔枝采摘装置中的另一个重要组成部分。精准的定位可以确保机械臂准确地抓取荔枝果实。常用的定位技术包括全局定位系统(GPS)、惯性导航系统(INS)、激光测距和视觉定位等。通过结合不同的定位技术,可以实现对果实的精确定位,从而提高采摘的准确性和效率。
陈燕等[23] 研究了大视场下荔枝采摘机器人的视觉预定位方法,满足大视场下采摘机器人的视觉预定位要求,为其他果蔬在大视场下采摘的视觉预定位提供参考。熊俊涛等[24] 针对静止、微扰动的荔枝,利用改进的FCM 模糊聚类方法进行果实、果梗的图像分割,利用Hough 直线拟合确定果梗上有效采摘区域,实现了荔枝采摘点的空间视觉定位,并通过虚拟现实技术进行了机械手采摘扰动目标的仿真。钟景润[25] 针对荔枝在野外环境下的果实检测和采摘点的定位进行了一系列研究,为夹持式采摘机器人研发奠定基础。金何[26]为了解决采摘机器人目标定位偏差大的缺陷,提出基于立体视觉匹配的采摘机器人目标定位方法,测试结果显示,应用该方法获得的采摘中心点匹配精度更高,采摘机器人目标定位误差最小值1.0%,降低了目标定位偏差,应用性能较佳。
2 发展趋势
(1)自动化和智能化。引入自动化控制系统和智能算法,可以实现对整个采摘过程的自动化控制,提高采摘效率和减轻劳动强度。未来的荔枝采摘装置将更加智能化,能够根据果实的成熟度和位置,自动选择最佳的采摘策略[27]。
(2)精准定位和采摘。引入高精度的定位技术,如激光测距和摄像头定位,可以实现对荔枝果实的准确定位和精确采摘。未来的荔枝采摘装置将更加注重定位技术的研究和应用,以提高采摘的准确性和效率[28]。
(3)多功能性和适应性。不同种植场地和环境条件下的荔枝树具有不同的树冠结构和果实形状,因此,荔枝采摘装置需要具备适应不同场地和条件的能力。未来的荔枝采摘装置将更加灵活和多功能,能够适应不同种植场地和环境条件下的采摘需求[29]。
(4)轻量化和便携化。传统的荔枝采摘装置通常体积庞大、质量较大,不便于携带和移动。未来的荔枝采摘装置将更加轻量化和便携化,使得装置更加灵活和易于携带。这将有助于降低对植株和果实的损伤,并提高采摘效率和质量[30]。
3 结束语
荔枝采摘装置的研究已取得一定的进展,但仍存在一些挑战和待解决的问题。未来的发展应关注自动化和智能化、精准定位和采摘、多功能性和适应性及轻量化和便携化等方面。通过不断的研究和创新,荔枝采摘装置有望提高采摘效率、降低劳动强度,并推动荔枝产业的可持续发展。
参考文献
[1]苏钻贤,杨胜男,陈厚彬,等.2020 年我国荔枝主产区的生产形势分析[J].南方农业学报,2020,51(7):1598-1605.
SU Zuanxian, YANG Shengnan, CHEN Houbin, et al. Analysis of the production situation for litchi in main planting areas of China in 2020[J].Journal of Southern Agriculture,2020,51(7):1598-1605.
[2]齐文娥,陈厚彬,罗滔,等.中国大陆荔枝产业发展现状、趋势与对策[J].广东农业科学,2019,46(10):132-139.
QI Wene, CHEN Houbin, LUO Tao, et al. Development status,trend and suggestion of litchi industry in mainland China[J]. Guangdong Agricultural Sciences,2019,46(10):132-139.
[3]刘晓珂,李灯华,刘佳佳,等.我国荔枝产业发展形势及对策建议[J].江西农业学报,2023,35(8):209-216.
LIU Xiaoke, LI Denghua, LIU Jiajia, et al. Development situation and countermeasures of litchi industry in China[J]. Acta Agriculturae Jiangxi,2023,35(8):209-216.
[4]李琳.广西北流市荔枝产业发展现状与对策分析[J].热带农业科学,2023,43(1):125-129.
LI Lin. Development status and countermeasures of litchi industry in Beiliu City, Guangxi[J]. Chinese Journal of Tropical Agriculture,2023,43(1):125-129.
[5]谢石璞.基于哈里斯鹰算法的采摘机械臂机构优化设计[J].南方农机,2024,55(4):41-48.
XIE Shipu. The optimization design of picking robot arm mechanism based on Harris Hawk optimization algorithm[J].China Southern Agricultural Machinery,2024,55(4):41-48.
[6]张志红.农业采摘机器人机械臂结构设计[J].南方农机,2023,54(10):19-21.
[7]董文.基于运动力学模型的采摘机械臂结构设计[J].农机化研究,2023,45(12):50-53,62.
DONG Wen.Structural design of picking robot arm based on kinematic mechanics model[J]. Journal of Agricultural Mechanization Research,2023,45(12):50-53,62.
[8]胡宏康.剪式采摘机械臂的结构设计与动力学研究[D].天津:天津理工大学,2023.
HU Hongkang. Structural design and dynamic study of scissors-type picking manipulator[D]. Tianjin: Tianjin University of Technology,2023.
[9]贺敬梓.基于虚拟现实的荔枝采摘机器人作业行为仿真[D].广州:华南农业大学,2018.
HE Jingzi. Simulation of operational behavior of litchi picking robotbased on virtual reality[D]. Guangzhou: South China Agricultural University,2018.
[10]李志海, 刘雁, 孙文晓, 等. 荔枝采摘器关键部件研究进展[J].中国热带农业,2023(1):33-41.
LI Zhihai,LIU Yan,SUN Wenxiao,et al.Research progress on key components of litchi picker[J].China Tropical Agriculture,2023( 1):33-41.
[11]李伯阳.基于机器视觉的梳摆式荔枝采摘机研究[D].广州:华南农业大学,2019.
LI Boyang. Design and experiment of column-comb litchi picker[D].Guangzhou:South China Agricultural University,2019.
[12]王新科, 李凯. 基于计算机视觉的采摘机器人作业优化研究[J].农机化研究,2024,46(8):235-239.
WANG Xinke,LI Kai.Research on operation optimization of picking robot based on computer vision[J]. Journal of Agricultural Mechanization Research,2024,46(8):235-239.
[13]李臣杰.采摘机器人目标识别技术研究:基于机器视觉及深度学习[J].农机化研究,2024,46(1):220-224.
LI Chenjie. Research on target recognition technology of picking robot based on machine vision and deep learning[J]. Journal of Agricultural Mechanization Research,2024,46(1):220-224.
[14]焦迎雪,董海涛,武文革.机器视觉在采摘机器人识别与定位中的应用[J].机械设计与制造,2024(2):280-285.
JIAO Yingxue, DONG Haitao, WU Wenge. Machine vision stay picking robot identification and positioning application of virtual reality[J].Machinery Design amp; Manufacture,2024(2):280-285.
[15]刘力维.采摘机器人机械臂运动控制与目标抓取研究:基于嵌入式和机器视觉技术[J].农机化研究,2024,46(4):68-72.
LIU Liwei. Research on motion control and target grasping of picking robot manipulator: based on embedded and machine vision technology[J]. Journal of Agricultural Mechanization Research, 2024, 46( 4) :68-72.
[16]莫宇达,邹湘军,叶敏,等.基于Sylvester 方程变形的荔枝采摘机器人手眼标定方法[J].农业工程学报,2017,33(4):47-54.
MO Yuda, ZOU Xiangjun, YE Min, et al. Hand-eye calibration method based on Sylvester equation deformation for lychee harvesting robot[J].Transactions of the Chinese Society of Agricultural Engineering,2017,33(4):47-54.
[17]杨旭海,周文皓,李育峰,等.采摘机械臂路径规划算法研究现状综述[J].中国农机化学报,2023,44(5):161-169.
YANG Xuhai, ZHOU Wenhao, LI Yufeng, et al. Review of path planning algorithms for picking manipulator[J].Journal of Chinese Agricultural Mechanization,2023,44(5):161-169.
[18]王娜,孟庆辉,魏宏飞.采摘机器人机械手避障方法研究:基于遗传优化和模糊PID 控制器[J].农机化研究,2024,46(4):203-206.
WANG Na, MENG Qinghui, WEI Hongfei. Research on obstacle avoidance method of picking robot manipulator based on fuzzy PID controller:based on genetic optimization[J]. Journal of Agricultural Mechanization Research,2024,46(4):203-206.
[19]姚书杰,王红军,林俊强.虚拟荔枝果园建模与采摘行为仿真研究[J]. 农机化研究: 1-7. https://link.cnki.net/urlid/23.1233.s.2024-0119.1858.024.
YAO Shujie,WANG Hongjun,LIN Junqiang.Modeling of virtual litchi orchard and simulation of picking behavior[J]. Journal of Agricultural Mechanization Research: 1-7. https://link.cnki.net/urlid/23.1233.s.20240119.1858.024.
[20]田鑫裕.基于计算机视觉的荔枝果树检测及树冠分割方法研究[D].湛江:广东海洋大学,2023.
TIAN Xinyu.Research on lychee fruit tree detection and crownsegmentation based on computer vision[D]. Zhanjiang: Guangdong Ocean University,2023.
[21]熊俊涛,林睿,刘振,等.夜间自然环境下荔枝采摘机器人识别技术[J].农业机械学报,2017,48(11):28-34.
XIONG Juntao, LIN Rui, LIU Zhen, et al. Visual technology of picking robot to detect litchi at nighttime under natural environment[J]. Transactions of the Chinese Society for Agricultural Machinery,2017,48(11):28-34.
[22]黎施欣,范小平.图像处理与识别在果蔬成熟度监测中的研究及应用[J].包装工程,2024,45(3):153-164.
LI Shixin, FAN Xiaoping. Research and application of image processing and recognition in maturity monitoring of fruit and vegetable[J].Packaging Engineering,2024,45(3):153-164.
[23]陈燕,王佳盛,曾泽钦,等.大视场下荔枝采摘机器人的视觉预定位方法[J].农业工程学报,2019,35(23):48-54.
CHEN Yan, WANG Jiasheng, ZENG Zeqin, et al. Vision pre-positioning method for litchi picking robot under large field of view[J]. Transactions of the Chinese Society of Agricultural Engineering,2019,35(23):48-54.
[24]熊俊涛,邹湘军,邹海鑫,等.基于动态目标的采摘机器人视觉定位技术研究[J].系统仿真学报,2015,27(4):836-842.
XIONG Juntao,ZOU Xiangjun,ZOU Haixin,et al.Visual positioning technology research of picking robot based on dynamic target[J].Journal of System Simulation,2015,27(4):836-842.
[25]钟景润.基于深度学习的野外环境下荔枝果实检测与采摘点定位研究[D].广州:华南农业大学,2020.
ZHONG Jingrun. Research on litchi detection and picking point location in field environment based on deep learning[D]. Guangzhou:South China Agricultural University,2020.
[26]金何.基于立体视觉匹配的采摘机器人目标定位方法[J].齐齐哈尔大学学报(自然科学版),2023,39(6):47-52.
JIN He.Target location method of picking robot based on stereo vision matching[J].Journal of Qiqihar University ( Natural Science Edition),2023,39(6):47-52.
[27]何捷.采摘机器人自动导航系统设计:基于计算机智能算法和机器视觉[J].农机化研究,2021,43(7):212-216.
HE Jie. Design of automatic navigation system for picking robot based on computer intelligent algorithm and machine vision[J].Journal of Agricultural Mechanization Research,2021,43(7):212-216.
[28]方华丽,吴晴.采摘机器人定位导航系统设计:基于无线传感网络和机器视觉[J].农机化研究,2021,43(9):199-203.
FANG Huali, WU Qing. Design of positioning and navigation system for picking robot wireless based on sensor networks and machine vision[J]. Journal of Agricultural Mechanization Research, 2021, 43( 9) :199-203.
[29]尚忠,钱栋伟,刘洪伟,等.履带自走式果园采摘多功能综合作业平台的研发[R].山东省烟台市农业科学研究院,2021-03-14.
[30]韩忠义,张向红.便携式荔枝采摘器设计[J].科学技术创新,2021(18):187-188.