王思玉,牛成强,李 钊,史文杰,樊桂菊,2,3※
(1.山东农业大学机械与电子工程学院,山东 泰安 271018;2.山东省园艺机械与装备重点实验室 3.山东省农业装备智能化工程实验室)
近年来,随着农业科学技术的发展,越来越多的智能化农业装备正逐步被应用于农业生产的各领域,其中智能农业机器人的推广和应用尤为显著。我国是一个农业大国,果蔬产业已成为我国农村经济重要支柱和农民收入主要来源。果蔬产业是典型的劳动密集型产业,在果蔬生产过程中,采摘约占整个作业量的40%[1],是果蔬生产中作业要求较高的关键环节,具有季节性强和劳动密集的特点。但现阶段我国果蔬采摘环节的综合机械化水平较低,大多数作业以人工为主,劳动生产率亟需提高。同时,随着城镇化进程的不断推进和人口老龄化现象的日益加重,农村劳动力逐年下降,果蔬采摘人工成本逐年提高,严重影响果蔬产业的健康发展。基于此,研究和开发果蔬采摘收获机器人对于提高果蔬采摘收获质量、降低人工劳动强度、提高劳动生产率、降低生产成本和增加社会经济效益具有重要意义。
典型果蔬具有品种繁多,果实形状复杂,生长发育程度不一的特性。即使是同一品种,同一棵植株,果实的形状也不同,相互之间差异较大且易被枝叶遮挡。这就要求采摘机器人具有良好的识别、定位与避障系统。
典型果蔬的果实生长位置无规律,分布比较随机,生长环境易受季节、天气等自然条件影响。这就要求采摘机器人能够适应复杂多变的果蔬种植环境,具有高度的自动化和智能化,能够实现精准判断,避免对作业对象造成误伤,以便其能够更为有效地应用于农业生产中。
典型果蔬的果实表皮组织由许多细胞组成,比较柔软,具有脆弱易伤的特点,必须仔细轻柔地对待和处理。这就要求采摘机器人末端执行器能够与目标果蔬柔性接触,尽可能避免接触损伤。
典型果蔬采摘机器人的作业对象具有复杂性和差异性,这就要求采摘机器人只需通过较为简单的改变,即可满足多种作业要求,具有良好的可靠性、可编程性和通用性。例如,同一采摘机器人针对不同品种果蔬的采摘、施肥和喷药等作业需求,只需使用与之配套的末端执行器即可完成相应作业,既能增加采摘机器人的通用性,又能提高其有效利用率。
果蔬采摘机器人的操作者大多是未受过专业教育的果农,因此要求其使用方法必须简单易懂,易于操作,另外,国内果蔬产业大多以个体经营为主,研发时要考虑成本问题,价格应在果农接受范围内,否则难以推广。
国外在果蔬采摘类机械方面的研制起步较早,从20世纪80年代中期开始,欧美和日本等发达国家就在果蔬采摘机械方面开展了广泛的研究。经过多年的研究与发展,国外果蔬采摘机械化程度不断提高,试制成功了多种自动化程度较高的果蔬采摘机器人,如苹果、柑橘、葡萄、草莓、茄子、番茄和黄瓜采摘机器人等,使果蔬采摘质量与采摘效率得到明显提升。目前,国外果蔬采摘机械已经具有较高的水平[2]。
国内在果蔬采摘类机械方面的研究始于20世纪90年代中期,虽与国外顶尖水平仍存在一定的差距,但近些年随着互联网信息化水平和机械化程度的不断提高,国内在果蔬采摘类机械方面的研究已有较大进步。
苹果采摘机器人涉及领域较广,包含机械结构设计、计算机科学与技术、农业与生物技术等,综合性较强。其通常由行走机构、执行机械臂、运动控制系统、机器视觉系统和末端执行器等组成,用来采收成熟的苹果[3]。日本北海道大学Duke M.Bulanon等[4-6]研制的采用二指夹持式末端执行器的苹果采摘机器人采用CCD摄像机和激光传感器进行果实识别,采用二指夹持果梗,虽避免了末端执行器与果实间的接触损伤,但对果梗较短的果实会出现加持失败,发生果实掉落现象。韩国庆北大学Jang等[7,8]研制的四自由度苹果采摘机器人具有末端执行器夹持力可控且工作范围广的特点,但因受自由度限制,无法绕过障碍物摘取果实。江苏大学赵德安等[9-11]研制的智能苹果采摘设备采用多种形式传感器与PRRRP结构机械臂配合,使其能够有效避障,一定程度上提高了采摘机器人的灵活性和适用性,但该机器人的采摘成功率还有待提高。南京农业大学姬长英等[12-14]设计研发的自走式智能苹果采摘机器人采用六自由度工业机械臂作为采摘机械臂,具有双目视觉系统和导航系统,能够完成自主导航、采摘及苹果装箱作业(图1)。该采摘机器人智能化及自动化程度较高,但整机体积较大,灵活性较差,对传统密植型果园的适用性较差。
图1 智能移动苹果采摘机器人
由于草莓的栽培模式具有多样性,例如地面栽培模式、高架栽培模式和垄作栽培模式等,同时生产经营规模各不相同,因此其采摘装置的差异性也较为明显。目前针对高架栽培模式研制的草莓采摘机械较多,而地面栽培模式和垄作栽培模式种植的草莓因其植株距离地面较近,使机械采摘难度增加,因此现有机械采摘设备较少。西班牙AGROBOT Robotics公司研发的基于高架栽培的草莓采摘机器人[15](图2)通过多个装有传感器和图像处理单元的机械臂相互协同工作进行采摘作业,采用末端执行器断茎加持的方式收获草莓,能够自主识别、定位并无损伤采摘高架栽培模式下的成熟草莓。但该机器人是针对高架栽培模式草莓研制的,专用性较强,对其他栽培模式草莓适配性较差,因此其通用性有待提高。西北农林科技大学张曼等针对自然条件下高架栽培模式种植的草莓通过搭建远—近景组合视觉定位系统,并结合D-H法建立的机械臂各连杆间的关系式,设计了一种草莓采摘末端执行器,既提高了采摘定位的精准度,又在一定程度上避免了对草莓造成的损伤。目前国内外草莓采摘机器人尚存在一些问题:一是设备普遍只适配特定种植模式或特定品种的草莓,专用性较强,通用性有待提高;二是设备整机结构复杂,体积较为庞大,通过性较差,对草莓种植密度的合理性提出更高的要求;三是草莓的自然生长环境复杂多变且其生长位置及形状各异,设备在识别草莓果实时易受多种因素干扰,导致设备定位精准度下降,出现漏摘或损伤果实的现象。
图2 基于高架栽培的草莓采摘机器人
葡萄与草莓同属于浆果类水果,外果皮为一到数层薄壁细胞,肉质具有柔软多汁的特点。葡萄果实形状各异,且在不同成熟度下颜色复杂多样,这对葡萄采摘机器人的研究提出了更高的要求。日本冈山大学Monta等[16]针对棚架种植模式研制出一种具有多种作业功能的葡萄采摘装置,采用激光扫描方式对葡萄簇进行识别、定位及果实成熟度判断。该装置配套有多种类型的末端执行器,在葡萄整个生长周期中,可根据实际作业需求对末端执行器进行更换,以满足修剪、喷药和收获等作业需求。针对现有葡萄采摘机器人自主导航性能普遍较差的问题,郭素娜等[17]设计出一款利用RSSI无线传感器定位导航的葡萄采摘机器人。该机器人采用视觉传感器对成熟葡萄进行定位,通过机械臂上柔软的执行末端对葡萄进行柔性抓取,既提升了设备的自主导航行能力,又完成了葡萄果实的无损采摘。欧洲研究团队研制的自走式葡萄园智能管理设备借助立体视觉技术对葡萄藤及葡萄果实的生长状况进行实时监控,有助于管理者准确判断葡萄果实的成熟度,辅助人工进行葡萄采摘作业。目前,葡萄采摘机器人的研发与应用过程仍存在采摘环境复杂、果实识别率低、果实损伤率高、采摘周期长、设备制造维修成本高等难点与制约因素,未来将在智能化、开放性、结构优化等方面进一步提高。
国外对番茄采摘机器人的研究已经有很多年的历史,并取得了一定的研究成果。90年代初,日本研制出一款具有自主导航功能的七自由度番茄采摘机器人,该机器人采摘系统由关节型机械臂和末端执行器两部分组成,其中末端执行器安装有橡胶垫和压力传感器,可以有效降低果实的接触损伤。2004年,美国加利福尼亚机械公司推出的全自动番茄收获机可将番茄蔓藤切割后送入分选仓,利用光谱特征识别出成熟番茄果实,从而将成熟番茄和未成熟番茄分开,并将番茄枝叶粉碎[18]。2008年,日本冈山大学田充司等研发出一款钢轨行走式番茄采摘机器人。在进行番茄采摘作业时,该机器人行走在预设钢轨上,同时利用视觉系统对番茄果实进行探测,若发现成熟果实,则控制系统控制四指型末端执行器采摘目标果实。由于该机器人工作时需要预设轨道,因此增加了管理者成本的投入,此外还要求具有合理的种植模式,因此,该机器人存在对传统密植型的番茄种植模式适配性较差和使用成本较高的问题。2017年北京工业大学王丽丽等针对棚架式种植园作业环境,以成熟番茄为采摘对象,研制出一款自走式多功能智能番茄采摘机器人系统。该机器人采用四轮结构型式的行走机构,既能用于温室种植环境,也能用于开放的田间种植环境,具有通用性强的特点。该机器人采用四自由度关节型机械臂,通过更换不同末端执行器即可采摘其他果蔬,提高了设备的通用性,具有操作灵活、控制方便的特点。目前,对番茄采摘机器人的研究虽然已在图像识别与定位、自主导航等方面取得阶段性进展,但从整体上来看,其智能化程度还未达到农业生产的要求。此外,还存在机器人行走底盘通用性差,采摘机械臂成本高、体积大、控制较复杂以及现有生产模式规范性不足的问题。为适应复杂的农田环境并最终实现高效无损采摘,番茄采摘机器人的实用性亟需提高。
黄瓜是设施农业生产的主要作物之一,收获过程枯燥、繁重,为减轻工人劳动负担、提高采摘效率,开展对黄瓜采收作业机器人的研究具有十分重要的现实意义。然而,黄瓜果实成熟度难以简单地通过颜色信息进行判断。黄瓜果实具有脆嫩和分布随机的特点,因此存在因黄瓜果实与植株颜色相近而难以识别的情况,进而导致采摘成功率下降。因此,近色系果实目标识别与柔性抓取成为黄瓜采收作业机械亟需解决的难点问题之一。日本的Kondo等[19-20]研制的黄瓜采收装置采用六自由度机械臂构成执行机构,采用CCD摄像头实时采集图像信息,利用反射光原理区分出黄瓜和茎叶,采摘成功率受颜色和形状的影响较大,约为60%。为提高采摘成功率和作业速度,需对黄瓜采摘机器人的结构、路径规划方法、采摘方式等方面进行改进。荷兰的Van Henten等[21,22]研发的智能温室轨道黄瓜采收机器人可在温室预设的轨道上实现整机的移动,在末端执行器将黄瓜果实夹紧后,采用高压电极将果梗切断的方式进行黄瓜采收作业,采摘成功率约为80%。中国农业大学的张帆等[23]针对黄瓜采摘环境光照复杂多变和近色系果实识别问题,提出基于光谱图像的近色系黄瓜识别方法,设计了一种温室黄瓜采摘机器人系统。该系统是一种适用于温室非结构环境下黄瓜采收的自动化系统,通过结合多传感器技术,使机器人具备了自主导航、果实成熟度判断和自主采摘等功能。目前,虽然大部分的黄瓜采收作业机械已具备最基本的采摘作业功能,但在一些方面仍存在着明显不足,需要加以优化与改进。
目前,各国对果蔬采摘机器人都进行了大量的研究并且取得了一定的成果,但大部分果蔬采摘机器人还处于研究阶段,离实用化和商品化还有一定的距离,仍存在以下问题:
(1)末端执行器采摘准确率有待提高。在采摘过程中,机器人视觉系统对果蔬的识别、定位及机械臂的路径规划存在误差,导致果实的采摘成功率下降。
(2)采摘设备环境适应性较差。在自然环境下生长的果实易被叶片遮掩,导致采摘设备的视觉系统对果实识别较为困难。此外,复杂的环境使采摘设备的避障性能面临严峻的挑战。
(3)采摘对象损伤率较高。在采摘过程中,机器人末端执行器夹持果实时易对其造成表面划伤及内部挤压变形,或者抓取不稳导致其脱落造成损伤。
(4)平均采摘周期较长,采摘效率不够高。机器人工作环境复杂,视觉系统对果实识别及定位率较低。另外,自然条件多变也增加了图像处理的难度。
(5)机器人通用性较差。现有机器人多数是针对某种特定果蔬而研制的,不同种类果蔬之间不能通用,专用性较强,但通用性较差。
(6)机器人制造成本及维修费用较高。果蔬采摘机器人不同于工业机器人,其作业环境更为复杂,作业要求更高,制造成本更高且使用周期较短,使用季节性较强,维护费用较高,经济性较差。
(1)优化机械结构。研发适用于典型果蔬采摘的执行器、传感器、材料和软体机械,降低采摘过程中的果蔬损伤,提高末端执行器的灵巧性和柔顺性。
(2)开发智能化的果实识别与定位技术以及图像处理算法,降低复杂环境对机器人视觉系统的干扰,提高果实识别与定位的准确性和快速性。
(3)优化自动控制系统。研发自适应强、鲁棒性好和路径算法最优的智能化自动控制系统,提高采摘机器人的可靠性和采摘效率。
(4)增强设备的通用性。开发适用于形状相近果蔬采摘的末端执行器,采用开放式的控制系统,研制可采摘多种果蔬的采摘机器人,增强设备的通用性,提高设备利用效率。
(5)降低设备操作难度及生产成本。设计操作简单方便,经济性好,制造和维修费用较低的设备。
随着经济结构的调整,农业劳动力逐渐向社会其他产业转移,导致劳动力资源日趋紧张,果蔬采摘机器人正越来越多地应用于农业采摘中。但果蔬品种多样,农艺不一,采摘收获环节较为复杂。目前典型果蔬采摘机器人大多专用性较强,但通用性较差,且平均采摘周期较长,易对采摘对象造成损伤,成为制约其应用推广的严重阻碍。为促进果蔬采摘机器人的实用化和商业化,还需要在优化机械结构设计、开发智能化果实识别定位技术、优化智能控制系统、增强设备通用性及降低设备操作难度等方面加以改进。