采摘机器人简介PPT课件

2021/6/71采摘机器人简介2021/6/72目录1摘要3国内外采摘机器人的研究进展2果树采摘机器人的特点4采摘机器人的结构组成5果蔬采摘机器人的主要问题和关键技术6参考文献2021/6/731采摘机器人的特点作业对象娇嫩、形状复杂且个体状况之间的差作业对象娇嫩、形状复杂且个体状况之间的差异性大，需要从机器人结构、传感器、控制系统异性大，需要从机器人结构、传感器、控制系统等方面加以协调和控制；等方面加以协调和控制；采摘对象具有随机分布性，大多被树叶、树枝采摘对象具有随机分布性，大多被树叶、树枝等掩盖，增大了机器人视觉定位难度，使得采摘等掩盖，增大了机器人视觉定位难度，使得采摘速度和成功率降低，同时对机械手的避障提出了速度和成功率降低，同时对机械手的避障提出了更高的要求；更高的要求；采摘机器人工作在非结构化的环境下，环境条采摘机器人工作在非结构化的环境下，环境条件随着季节、天气的变化而发生变化，环境信息件随着季节、天气的变化而发生变化，环境信息完全是未知的、开放的，要求机器人在视觉、知完全是未知的、开放的，要求机器人在视觉、知识推理和判断等方面有相当高的智能；识推理和判断等方面有相当高的智能；2021/6/74采摘对象是有生命的、脆弱的生物体，要求在采摘对象是有生命的、脆弱的生物体，要求在采摘过程中对果实无任何损伤，从而需要机器人采摘过程中对果实无任何损伤，从而需要机器人的末端执行器具有柔顺性和灵巧性；的末端执行器具有柔顺性和灵巧性；高智能导致高成本，农民或农业经营者无法接高智能导致高成本，农民或农业经营者无法接受，并且采摘机器人的使用具有短时间、季节性、受，并且采摘机器人的使用具有短时间、季节性、利用率不高的缺点，是限制采摘机器人推广使用利用率不高的缺点，是限制采摘机器人推广使用的重要因素；的重要因素；果蔬采摘机器人的操作者是农民，不是具有机果蔬采摘机器人的操作者是农民，不是具有机电知识的工程师，因此要求果蔬采摘机器人必须电知识的工程师，因此要求果蔬采摘机器人必须具有高可靠性和操作简单、界面友好的特点。具有高可靠性和操作简单、界面友好的特点。2021/6/752 国内外采摘机器人的研究进展工业机器人技术工业机器人技术计算机计算机图像处理技术图像处理技术人工智能人工智能机械震摇式机械震摇式气动震摇式气动震摇式传统采摘机器人类型现今主要依靠的技术目前，日本、荷兰、法国、英国、意大利、美国、以色列、西班牙目前，日本、荷兰、法国、英国、意大利、美国、以色列、西班牙等国都展开了果蔬收获机器人方面的研究工作等国都展开了果蔬收获机器人方面的研究工作。涉及到的研究对象涉及到的研究对象主要有甜橙、苹果、西红柿、樱桃西红柿、芦笋、黄瓜、甜瓜、葡主要有甜橙、苹果、西红柿、樱桃西红柿、芦笋、黄瓜、甜瓜、葡萄、甘蓝、菊花、草莓、蘑菇等，但这些收获机器人目前都还没能萄、甘蓝、菊花、草莓、蘑菇等，但这些收获机器人目前都还没能真正实现商业化。真正实现商业化。2021/6/76西红柿采摘机器人 图图1 1 西红柿采摘机器人西红柿采摘机器人Fig.2 Tomato harvesting roboFig.2 Tomato harvesting robo日本日本 Kondo-N 等人研制的西红柿收获机器人由等人研制的西红柿收获机器人由机械手机械手 末端执行器末端执行器 视觉传感器和移动机构等组视觉传感器和移动机构等组成成 如图如图1所示西红柿各个果实不一定是同时成熟所示西红柿各个果实不一定是同时成熟 并且果实有时被叶茎挡住并且果实有时被叶茎挡住 收获时要求机械手活收获时要求机械手活动范围大且能避开障碍物动范围大且能避开障碍物 所以机器人的采摘机所以机器人的采摘机械手采用械手采用 7自由度的自由度的 SCORBOT ER 工业机器人工业机器人，2021/6/77 采摘时采摘时 移动机构行走一定距离后就进行图像采集移动机构行走一定距离后就进行图像采集 利用利用视觉系统检测出果实相对机械手坐标系的位置信息视觉系统检测出果实相对机械手坐标系的位置信息 判断判断西红柿是否在收获的范围之内西红柿是否在收获的范围之内 若可以收获若可以收获 则控制机械则控制机械手靠近并摘取果实吸盘把果实吸住后手靠近并摘取果实吸盘把果实吸住后 机械手指抓住果实机械手指抓住果实 然后通过机械手的腕关节拧下果实。然后通过机械手的腕关节拧下果实。彩色摄像机彩色摄像机识别识别双目视觉方法定位双目视觉方法定位四轮机构行走四轮机构行走2021/6/783采摘机器人的结构组成移动机构移动机构机械手机械手末端执行器末端执行器识别和定位系统识别和定位系统采摘机器人2021/6/7931移动机构车轮式车轮式履带式履带式人形结构人形结构车轮式应用最广泛。车轮式的行走机构转弯半径小、转车轮式应用最广泛。车轮式的行走机构转弯半径小、转向灵活，但轮式的结构对于松软的地面适应性较差，会向灵活，但轮式的结构对于松软的地面适应性较差，会影响机械手的运动精度。而履带式的行走机构对地面的影响机械手的运动精度。而履带式的行走机构对地面的适应性较好；但由于其转弯半径过大，转向不灵活。适应性较好；但由于其转弯半径过大，转向不灵活。2021/6/710目对于西瓜等作物的藤茎在地面上的果实，使用上述两目对于西瓜等作物的藤茎在地面上的果实，使用上述两种行走装置显然不适合。移动机构的设计必须要保证机种行走装置显然不适合。移动机构的设计必须要保证机器人运动平稳和器人运动平稳和灵活避障灵活避障。荷兰开发的黄瓜收获机器人。荷兰开发的黄瓜收获机器人以铺设于温室内的加热管道作为小车的行走轨道。日本以铺设于温室内的加热管道作为小车的行走轨道。日本等尝试将人形机器人引入到移动式采摘机器人中；但这等尝试将人形机器人引入到移动式采摘机器人中；但这种技术目前还不成熟，有待进一步的研制开发。采用智种技术目前还不成熟，有待进一步的研制开发。采用智能导航技术的无人驾驶自主式小车是智能采摘机器人行能导航技术的无人驾驶自主式小车是智能采摘机器人行走部分的发展趋势。走部分的发展趋势。车轮式西红柿履带式葡萄2021/6/71132机械手机械手又称操作机，是指具有和人手臂相似的动作功机械手又称操作机，是指具有和人手臂相似的动作功能，并使工作对象能在空间内移动的机械装置，是机能，并使工作对象能在空间内移动的机械装置，是机器人赖以完成工作任务的实体。在收获机器人中，机器人赖以完成工作任务的实体。在收获机器人中，机械手的主要任务就是将末端执行器移动到可以采摘的械手的主要任务就是将末端执行器移动到可以采摘的目标果实所处的位置，目标果实所处的位置，直角坐标直角坐标圆柱坐标圆柱坐标极坐标极坐标球坐标球坐标多关节多关节（类人）（类人）其工作空间要求机器人能够达到任何一个目标果实。其工作空间要求机器人能够达到任何一个目标果实。相比其它结构比较起来，要求更加灵活和方便。相比其它结构比较起来，要求更加灵活和方便。机机械手的自由度是衡量机器人性能的重要指标之一械手的自由度是衡量机器人性能的重要指标之一，它直接决定了机器人的运动灵活性和控制的复杂性。它直接决定了机器人的运动灵活性和控制的复杂性。2021/6/712果蔬采摘机器人往往工作于非结构性环境中，工作对果蔬采摘机器人往往工作于非结构性环境中，工作对象常常是随机分布的，因此在机械手的设计过程中，象常常是随机分布的，因此在机械手的设计过程中，必须考虑采用最合理的设计参数必须考虑采用最合理的设计参数。机器人类型机器人类型工作空间工作空间机械臂数量机械臂数量机器人机器人结构方式结构方式机械臂越多，机械臂越多，机构越灵活，机构越灵活，但控制也越复杂，但控制也越复杂，消耗的时间也越多。消耗的时间也越多。必须在系统数量和必须在系统数量和性能之间进行平衡性能之间进行平衡串联式、并联式串联式、并联式2021/6/713为了设计出最合适的操作手机构，还必须进行机构的运动学和动力学研究，同时为了设计出最合适的操作手机构，还必须进行机构的运动学和动力学研究，同时还要考虑其运动平衡性能，综合优化算法设计，使机器人能灵巧无碰撞地完成采还要考虑其运动平衡性能，综合优化算法设计，使机器人能灵巧无碰撞地完成采摘任务。摘任务。评价机械手的结构性能参数评价机械手的结构性能参数工作空间工作空间可操作度可操作度位置多样性位置多样性冗余度冗余度2021/6/71433识别和定位系统采摘机器人视觉系统的工作方式由于环境的复杂性，有时需采摘机器人视觉系统的工作方式由于环境的复杂性，有时需要利用要利用多传感器多信息融合技术多传感器多信息融合技术来增强环境的感知识别能力来增强环境的感知识别能力并利用瓜果的形状来识别和定位果实。并利用瓜果的形状来识别和定位果实。目前的采摘机器人视觉系统在环境比较规则的情况下能取得目前的采摘机器人视觉系统在环境比较规则的情况下能取得比较好的效果，但在自然环境下的应用仍需要进一步的研究。比较好的效果，但在自然环境下的应用仍需要进一步的研究。这需要研究出有效、快速的算法，将果实分辨出来。在目前这需要研究出有效、快速的算法，将果实分辨出来。在目前这种技术还不是很成熟的情况下，可采用人工辅助选择目标这种技术还不是很成熟的情况下，可采用人工辅助选择目标和定位。和定位。获取水果的获取水果的数字化图像数字化图像运用图像处理运用图像处理算法识别算法识别确定图像中确定图像中水果的位置水果的位置采摘机器人视觉系统的工作方式采摘机器人视觉系统的工作方式: :果实的识别和定位是果实采摘机器人的首要任务和设计难点，果实的识别和定位是果实采摘机器人的首要任务和设计难点，识别和定位的准确性关系到采摘机器人工作效率。识别和定位的准确性关系到采摘机器人工作效率。2021/6/71534末端执行器数量数量形状形状尺寸尺寸动力学特性动力学特性水果的化学水果的化学和生物特性和生物特性末端执行器是果蔬收获机器人的另一重要部件，通常由其直接对目标末端执行器是果蔬收获机器人的另一重要部件，通常由其直接对目标水果进行操作。因此，需要满足各种不同的规则，以便切除水果并确水果进行操作。因此，需要满足各种不同的规则，以便切除水果并确保水果质量。末端执行器的基本结构取决于工作对象的特性以及工作保水果质量。末端执行器的基本结构取决于工作对象的特性以及工作方式方式。手指的数量和手指的数量和形状的设计与形状的设计与所要采摘的果实所要采摘的果实密切相关。密切相关。一般而言，一般而言，手指的数量越多，手指的数量越多，采摘效果越好，采摘效果越好，但控制也越复杂但控制也越复杂如抓取力、切割力、如抓取力、切割力、弹性变形、光特性、弹性变形、光特性、声音属性、电属性等声音属性、电属性等物理属性物理属性：2021/6/716抓取范围水果分离率水果损伤率水果损伤率采摘的灵活性速率末端执行器的性能评估指标：旋转拧取机械切除激光切割高压水喷切双电极切割法美国俄亥俄州立大学开发了一种由四手指机械手和一个机械手控制器组成的末端执行系统，能够很好地抓持和采摘果实，灵活轻巧，采摘成功率有明显的提高。传统采摘方法：现代采摘方法：2021/6/7174果蔬采摘机器人的主要问题和关键技术41研究中的问题果实的识别率不高果实的识别率不高 或识别后定位精度不高。或识别后定位精度不高。果实的损伤率较大。果实的损伤率较大。 采摘机器人的制造成本较高，采摘机器人的制造成本较高，设备利用率低，设备利用率低，使用维护不方便。使用维护不方便。果实的平均采摘果实的平均采摘周期较长。周期较长。存在的问题2021/6/71842研究中的关键技术点击添加文本点击添加文本开发智能化的开发智能化的图像处理算法图像处理算法采用主动光源的采用主动光源的多维视觉系统多维视觉系统多传感器信息融合4 42 21 1智能化的智能化的果实识别和定位果实识别和定位2021/6/719422机械本体的优化设计点击添加文本点击添加文本通用性和灵活性强通用性和灵活性强系统简单、系统简单、成本低、成本低、可控性好、可控性好、易于操作和维护易于操作和维护可以实现果蔬的无损采摘机械本体的机械本体的优化设计优化设计2021/6/720七自由度番茄采摘机械手此机械手在工作空间、可操作度、灵活性、避障等性能指此机械手在工作空间、可操作度、灵活性、避障等性能指标方面具有优越性。标方面具有优越性。2021/6/721机械手端部对基坐标系坐标变换公式：机械手端部对基坐标系坐标变换公式：T T7 7= A= A1 1A A2 2A A3 3A A4 4A A5 5A A6 6A A7 72021/6/722番茄采摘机械手番茄采摘机械手D-H坐标参数坐标参数其中ai为连杆长度，i为连杆扭角，di为两连杆距离，i为两连杆夹角。2021/6/723位姿矩阵的通用公式为：位姿矩阵的通用公式为： 2021/6/724番茄采摘机械手各个关节的位姿矩阵番茄采摘机械手各个关节的位姿矩阵 2021/6/725综上可得出等式：综上可得出等式：2021/6/726对应每一个元素的计算式为对应每一个元素的计算式为：2021/6/727423路径规划和运动控制技术与一般工业机器人不同之处在于，采摘机器人在工作与一般工业机器人不同之处在于，采摘机器人在工作时环境复杂，并且需要在运动过程中，实时探测和判时环境复杂，并且需要在运动过程中，实时探测和判断目标水果，根据要求采摘水果。断目标水果，根据要求采摘水果。为了尽可能有效而且可靠地达到目标位置，机器人应为了尽可能有效而且可靠地达到目标位置，机器人应能根据环境模型和目标位置确定自身的行走路径。采能根据环境模型和目标位置确定自身的行走路径。采摘机器人在运动过程中，其数据处理量相当大，对控摘机器人在运动过程中，其数据处理量相当大，对控制系统的实时性要求高。制系统的实时性要求高。同时，由于作物果实是随机分布的，为了灵活地接近同时，由于作物果实是随机分布的，为了灵活地接近果实，提高其采摘的效率，收获机器人往往存在果实，提高其采摘的效率，收获机器人往往存在冗余自由度，这对机器人的轨迹规划、运动控制、避障行轨迹规划、运动控制、避障行走走等方面都提出了更复杂、更严格的要求。等方面都提出了更复杂、更严格的要求。因此，必须研究开发出自因此，必须研究开发出自适应性强、鲁棒性好和路径适应性强、鲁棒性好和路径算法最优算法最优的智能化机器人。的智能化机器人。2021/6/728424开放式的控制系统体系结构这两种实现方式都是封闭式的结构，使得采摘机器人这两种实现方式都是封闭式的结构，使得采摘机器人只能具有特定的功能，适应于特定的环境，通用性差，只能具有特定的功能，适应于特定的环境，通用性差，不便于对系统进行扩展和改进。不便于对系统进行扩展和改进。开放式结构的果蔬采摘机器人具有良好的扩展性、通开放式结构的果蔬采摘机器人具有良好的扩展性、通用性和柔性作业的能力。通过更换不同自由度的机械用性和柔性作业的能力。通过更换不同自由度的机械部分适应不同类型的农作物，而且更换不同的末端执部分适应不同类型的农作物，而且更换不同的末端执行器可以进行不同的操作。行器可以进行不同的操作。工业机器人工业机器人独立设计的独立设计的专用机电系统专用机电系统目前已有的果蔬采摘机器人一般采用两种实现方式：目前已有的果蔬采摘机器人一般采用两种实现方式：2021/6/729构建开放式的控制系统，在硬件上要为用户提供标准的控制平台以及丰富的外围接口，而且易于扩展，以适应不同的机器人本体。系统的软件应在标准操作系统下采用标准的语言开发，做到可移植，易修改、重构及扩展，并能提供公开的用户接口和程序接口。只要更换不同的机器人机械部分和末端执行器，用该系统可以控制不同的机器人，这样在不同的季节，就能完成不同的作业，提高了控制系统的利用率，减少了设备成本。2021/6/730参考文献参考文献1 1 赵赵 匀匀,武传宇武传宇.农业机器人的研究进展及存在的问题农业机器人的研究进展及存在的问题J.农业工程学报农业工程学报,2013,19(1):20-24.22孙进良，刘师多，丁慧玲我国玉米收获机械化的应孙进良，刘师多，丁慧玲我国玉米收获机械化的应用现状与展望用现状与展望J农机化研究，农机化研究，2011，31(3)：21721933沈明霞沈明霞.，姬长英，姬长英.农业机器人的开发背景及技术动向农业机器人的开发背景及技术动向J.农机化研究，农机化研究，2010（5）：）：31-35.44汤修映，张铁中汤修映，张铁中.果蔬收获机器人研究综述果蔬收获机器人研究综述J.机器人，机器人，2012，27（1）：）：90-96.55蔡自兴，机器人学蔡自兴，机器人学M北京：清华大学出版社，北京：清华大学出版社，2000:46-50.66张道林，孙永进，赵洪光，等立辊式玉米摘穗与茎张道林，孙永进，赵洪光，等立辊式玉米摘穗与茎秆切碎装置的设计秆切碎装置的设计J农业机械学报，农业机械学报，2012，36(7)：50-522021/6/7317闰洪余，吴文福，韩峰，等。立辊型玉米收获机摘穗辊辊型对工作性能的闰洪余，吴文福，韩峰，等。立辊型玉米收获机摘穗辊辊型对工作性能的影响影响J农业机械学报，农业机械学报，2011，40(5)：76808 徐丽明徐丽明 , 张铁中张铁中 . 果蔬果实收获机器人的研究现状及关键问题和对策果蔬果实收获机器人的研究现状及关键问题和对策 J. 农业工程学报，农业工程学报， 2004，20（5）：）：38-42.9沈景明，王薇玉米摘穗机构的研究与试验沈景明，王薇玉米摘穗机构的研究与试验J农村牧区机械化，农村牧区机械化，2010(1)：192010 黄贤新黄贤新 . 工业机器人机械手设计工业机器人机械手设计 J. 装备制造技术，装备制造技术，2012（03）:25-32.11 崔玉洁崔玉洁 , 张祖立张祖立 , 白晓虎白晓虎 . 采摘机器人的研究进展与现状分析采摘机器人的研究进展与现状分析 J. 农机农机化研究，化研究，2011（2）：）：4-7.12 田素博田素博 , 邱立春邱立春 , 秦军伟秦军伟 , 刘春芳刘春芳 . 国内外采摘机器人机械手结构比较的国内外采摘机器人机械手结构比较的研究研究 J. 农机化研究，农机化研究， 2014（3）：）：195-197.部分资料从网络收集整理而来，供大家参考，感谢您的关注！