收藏本站
《西北农林科技大学》 2019年
收藏 | 手机打开
二维码
手机客户端打开本文

全视场猕猴桃果实信息感知与连贯采摘机器人关键技术研究

穆龙涛  
【摘要】:随着猕猴桃产业规模不断扩大,参与果实收获作业的劳动力却逐年减少,为了解决劳动力短缺的问题,需要利用机械化替代人工进行采摘作业。目前,猕猴桃采摘机器人存在作业效率低的问题。基于此问题研究了全视场(摄像机能够观察到的最大范围)猕猴桃果实信息感知与连贯采摘机器人关键技术。本研究能够提高果实采摘机器人作业效率,对于采摘机器人研制具有重要研究意义和应用价值。本文主要研究内容和结论如下:(1)提出了改进AlexNet的全视场猕猴桃目标识别与定位方法。采用Faster R-CNN对不同光照条件下4类采集条件的图像训练集进行训练,提出的Im-AlexNet对4种天气类型图像的识别精度统计分别为:94.36%,96.87%,94.94%和97.83%,识别精度的平均值为96.00%,识别时间约为1s,比LeNet、AlexNet和VGG16识别精度的平均值高出5.73百分点;其中对存在遮挡情况下的图像识别精度为94.75%。另外将RGB图像识别结果与深度图像进行配准,获得RGB图像上的点坐标对应点云集中的三维坐标。试验测量果萼位置与识别中心点在x和y方向平均误差分别为4.3 mm、3.9 mm,使用雷达测距仪测量30个样本z轴方向(高度)平均误差为3.5 mm。(2)基于全视场猕猴桃果实簇的识别结果,确定了多机械手协同作业的采摘任务分区及顺序规划方法。采用K-means聚类进行采摘任务分区,并基于模拟退化法(SAA)确定果实的采摘顺序。按照采摘机械手协同作业特点进行采摘任务规划,首先确定猕猴桃果实簇位置,将100 mm范围内的所有毗邻猕猴桃归为在同一簇;将临近果实簇进行聚类,将图像中果实簇分为几个部分并确定分区结果。其次采用模拟退火算法对果实采摘顺序进行规划,将采摘任务分为4个分区时,其采摘顺序的最短路径的长度平均值为852 mm。结果表明多个机械手的数量对应采摘任务分区个数(2个、4个)的研究方法,可作为采摘机器人协同作业任务规划的研究基础。(3)研究了猕猴桃果实的连贯采摘方法,试制了末端执行器并验证了连贯采摘运动轨迹。对猕猴桃农艺特点进行了调研,确定了猕猴桃连贯采摘方法,建立了采摘机理的几何模型,同时对末端执行器的关键结构进行了参数设计。基于仿生的采摘方法,实现了末端执行器“抓取-采摘-卸果”的弧形运动轨迹。通过Adams对末端执行器运动轨迹进行了仿真分析,并对抓取采摘轨迹进行优化,实现了“抓取-采摘-卸果-复位”一体化的连贯采摘动作,确定了最佳分离角度,解决了末端执行器采摘作业时间过长、采摘成功率偏低等问题。通过末端执行器连贯采摘试验验证结果得知,果实的长轴和果梗呈60-70°时果实的分离力最小,单果采摘成功率为94.2%,单果采摘平均时间为4-5 s。(4)针对采摘机器人从底部进行作业特点,研究了基于ROS的机械臂采摘位姿控制方法。通过ROS MoveIt!模块对机械臂采摘位姿及运动路径进行了规划,实现了采摘机械臂逆运动学求解,对采摘机械臂的运动位姿特性进行了分析。使用Solidworks创建了机械臂模型,通过sw2urdf插件转换工具,导出了机械臂的URDF的模型文件,并进行了参数配置。基于ROS对6自由度机械臂进行了运动仿真,选取开源运动规划库(OMPL)中的随机扩展树算法(RRT)进行采摘机械臂的运动规划分析并驱动UR5机械臂。结果表明:通过对采摘机械臂采摘位姿进行了运动控制,确定了机械臂的采摘位姿和运动轨迹,得出了机械臂的工具端旋转的最大半径值和采摘分离点的位置。(5)试制了猕猴桃采摘机器人样机并进行了验证试验。猕猴桃采摘机器人由视觉系统、机械手、控制单元、末端执行器和移动平台等五部分组成,并在平台上安装果实筐、波纹管、补光灯等。通过猕猴桃采摘机器人试验样机验证了全视场果实信息感知和连贯采摘方法,并统计采摘机器人在实际作业环境中的识别精度、连贯采摘方法的评价指标。结果表明:采摘机器人视觉识别系统的识别精度为95.31%,对猕猴桃的果实目标定位准确率为79.06%,其中误识别和漏识别果实占比分别为1.25%和4.69%,图像识别平均时间约为1.0 s/幅。采摘末端执行器实现了“抓取-采摘-分离”的连贯动作,单果采摘时间约为5.8秒,验证了文中提出的猕猴桃连贯采摘方法的有效性。
【学位授予单位】:西北农林科技大学
【学位级别】:博士
【学位授予年份】:2019
【分类号】:TP242;S225

手机知网App
【参考文献】
中国期刊全文数据库 前10条
1 王儒敬;孙丙宇;;农业机器人的发展现状及展望[J];中国科学院院刊;2015年06期
2 叶敏;邹湘军;杨洲;刘念;陈炜文;罗陆锋;;荔枝采摘机器人拟人指受力分析与夹持试验[J];农业机械学报;2015年09期
3 傅隆生;张发年;槐岛芳德;李桢;王滨;崔永杰;;猕猴桃采摘机器人末端执行器设计与试验[J];农业机械学报;2015年03期
4 于晓旭;赵匀;陈宝成;周脉乐;张昊;张智超;;移栽机械发展现状与展望[J];农业机械学报;2014年08期
5 马国成;刘昭度;裴晓飞;王宝锋;齐志权;;车载雷达多车道目标识别及补偿方法[J];北京理工大学学报;2013年11期
6 李志鹏;郭艳玲;王海滨;;蓝莓植株中心定位与运行轨迹的研究[J];森林工程;2013年05期
7 崔永杰;苏帅;王霞霞;田玉凤;李平平;张发年;;基于机器视觉的自然环境中猕猴桃识别与特征提取[J];农业机械学报;2013年05期
8 甘亚辉;戴先中;;多机械臂协调控制研究综述[J];控制与决策;2013年03期
9 刘占德;吕岩;;猕猴桃生产中存在的几个问题[J];西北园艺(果树);2011年04期
10 吴军;徐昕;连传强;贺汉根;;协作多机器人系统研究进展综述[J];智能系统学报;2011年01期
中国博士学位论文全文数据库 前10条
1 李国利;多末端苹果采摘机器人设计与研究[D];南京农业大学;2017年
2 王丽丽;番茄采摘机器人关键技术研究[D];北京工业大学;2017年
3 王萌;樱桃小番茄腋芽摘除机器人关键技术研究[D];浙江大学;2016年
4 叶敏;基于运动行为的荔枝采摘机器人夹切容错设计[D];华南农业大学;2016年
5 顾玉宛;基于并行计算的苹果采摘机器人关键技术研究[D];江苏大学;2016年
6 贾伟宽;基于智能优化的苹果采摘机器人目标识别研究[D];江苏大学;2016年
7 项荣;开放环境中番茄的双目立体视觉识别与定位[D];浙江大学;2013年
8 黄铝文;苹果采摘机器人视觉识别与路径规划方法研究[D];西北农林科技大学;2013年
9 吕继东;苹果采摘机器人视觉测量与避障控制研究[D];江苏大学;2012年
10 王新忠;温室番茄收获机器人选择性收获作业信息获取与路径规划研究[D];江苏大学;2012年
中国硕士学位论文全文数据库 前7条
1 谢洪起;基于RGB-D相机的猕猴桃外形和体积检测方法研究[D];西北农林科技大学;2018年
2 张莎莎;猕猴桃双机械臂协调采摘方法研究[D];西北农林科技大学;2018年
3 怀志斌;基于机器视觉的机器人系统的开发[D];北京工业大学;2018年
4 陈礼鹏;基于机器视觉的簇生猕猴桃果实多目标识别方法研究[D];西北农林科技大学;2018年
5 刘亚东;基于联动机构的猕猴桃采摘末端执行器研制[D];西北农林科技大学;2017年
6 吴潮华;多工业机器人基座标系标定及协同作业研究与实现[D];浙江大学;2015年
7 巩俐;AmigoBot机器人协同操作控制研究[D];济南大学;2014年
【共引文献】
中国期刊全文数据库 前10条
1 麦春艳;郑立华;孙红;杨玮;;基于RGB-D相机的果树三维重构与果实识别定位[J];农业机械学报;2015年S1期
2 倪有亮;金诚谦;刘基;;全自动移栽机取送苗系统的设计与试验[J];农业工程学报;2015年23期
3 李桢;王滨;陈子啸;崔永杰;;基于MatLab的猕猴桃采摘机械臂运动学仿真研究[J];农机化研究;2015年12期
4 吕燕;沈玉玲;蒋劲峰;;基于EtherCAT的双机器人协作系统设计[J];制造业自动化;2015年22期
5 吴彦强;侯加林;赵润华;刘中正;;传送带式蔬菜移栽机的设计与研究[J];农机化研究;2015年11期
6 金鑫;杜新武;耿贵胜;姬江涛;董祥;刘卫想;;2ZDJ-2型钵苗移栽机栽植系统试验[J];农业机械学报;2015年12期
7 张敏;张文毅;周长省;祁兵;纪要;;非匀速三插臂水稻高速插秧机参数分析与试验[J];农业机械学报;2015年12期
8 陈志侃;张国良;原磊;吴戈;;惯性参数未知双臂空间机器人自适应模糊控制[J];电光与控制;2015年11期
9 李春龙;邹鲲;陆晨;吕琳烨;叶勇;;基于CAN总线的多机械手并行任务控制系统设计[J];制造业自动化;2015年18期
10 李永强;杨学军;王俊;张健飞;尹素珍;;基于Adams的酿酒葡萄植株受迫振动仿真研究[J];安徽农业科学;2015年27期
中国博士学位论文全文数据库 前10条
1 穆龙涛;全视场猕猴桃果实信息感知与连贯采摘机器人关键技术研究[D];西北农林科技大学;2019年
2 白云;煤矿蛇形探测机器人位姿控制方法研究[D];西安科技大学;2019年
3 陈艳;基于机器视觉的家禽机械手掏膛及可食用内脏分拣技术研究[D];华中农业大学;2018年
4 吴超;面向物联网移动数据汇聚的能效优化方法研究[D];北京邮电大学;2018年
5 夏雪;基于计算机视觉的苹果树果实探测与定位方法[D];中国农业科学院;2018年
6 刘琼;乡村道路环境下农业机器人导航避障算法研究[D];西北农林科技大学;2017年
7 吕太之;移动机器人路径规划和地图创建研究[D];南京理工大学;2017年
8 王丽丽;番茄采摘机器人关键技术研究[D];北京工业大学;2017年
9 叶敏;基于运动行为的荔枝采摘机器人夹切容错设计[D];华南农业大学;2016年
10 顾玉宛;基于并行计算的苹果采摘机器人关键技术研究[D];江苏大学;2016年
中国硕士学位论文全文数据库 前10条
1 陈绵鹏;六自由度工业机器人运动学标定与实验研究[D];济南大学;2019年
2 谢航;基于机器视觉的树上柚子果实识别方法研究[D];华中农业大学;2019年
3 刘浩洲;基于信息感知的猕猴桃喷雾授粉方法研究[D];西北农林科技大学;2019年
4 戎毫;基于果梗分离采摘方式的猕猴桃采摘末端执行器研制[D];西北农林科技大学;2019年
5 冯亚利;基于深度学习的田间多簇猕猴桃果实检测方法研究[D];西北农林科技大学;2019年
6 王周宇;猕猴桃采摘机器人自动搬运装箱装置的设计与研究[D];西北农林科技大学;2019年
7 徐意;工业机器人协同运动控制技术的研究与实现[D];华中科技大学;2019年
8 刘嘉超;基于信息融合的采摘机器人视觉识别与定位系统研究[D];华南理工大学;2019年
9 孙昊;基于数字图像的钢筋工程快速检查方法研究[D];江苏大学;2019年
10 房银杰;地空两用农林信息采集机器人机器视觉系统研究[D];东北林业大学;2019年
【二级参考文献】
中国期刊全文数据库 前10条
1 张发年;李桢;王滨;傅隆生;崔永杰;;猕猴桃果实物理参数与损伤因素的研究[J];农机化研究;2014年11期
2 李玉林;崔振德;张园;李明福;罗文杨;葛畅;;中国农业机器人的应用及发展现状[J];热带农业工程;2014年04期
3 姬伟;罗大伟;李俊乐;杨俊;赵德安;;果蔬采摘机器人末端执行器的柔顺抓取力控制[J];农业工程学报;2014年09期
4 刘继展;白欣欣;李萍萍;毛罕平;;果实快速夹持复合碰撞模型研究[J];农业机械学报;2014年04期
5 李志鹏;赵德金;郭艳玲;;基于Matlab蓝莓树枝轴向有阻尼自由振动仿真研究[J];森林工程;2013年04期
6 吴畏;孙松林;肖名涛;;我国移栽机械的现状与发展趋势[J];农业技术与装备;2013年12期
7 俞亚新;骆春晓;俞高红;赵雄;俞腾飞;;椭圆-不完全非圆齿轮行星系取苗机构参数优化[J];农业机械学报;2013年06期
8 鲍官军;张水波;陈亮;杨庆华;;基于气动柔性驱动器的球果采摘末端抓持器[J];农业机械学报;2013年05期
9 崔永杰;苏帅;王霞霞;田玉凤;李平平;张发年;;基于机器视觉的自然环境中猕猴桃识别与特征提取[J];农业机械学报;2013年05期
10 周俊;朱树平;;农业机器人果蔬抓取中滑觉检测研究[J];农业机械学报;2013年02期
中国博士学位论文全文数据库 前10条
1 纪超;温室果蔬采摘机器人视觉信息获取方法及样机系统研究[D];中国农业大学;2014年
2 黄小龙;蔬菜株间锄草机器人末端执行器优化设计研究[D];中国农业大学;2014年
3 顾涛;集群MapReduce环境中任务和作业调度若干关键问题的研究[D];南开大学;2014年
4 林文辉;基于Hadoop的海量网络数据处理平台的关键技术研究[D];北京邮电大学;2014年
5 朱建章;复杂场景下实时视觉目标跟踪的若干研究[D];武汉大学;2014年
6 谢忠红;采摘机器人图像处理系统中的关键算法研究[D];南京农业大学;2013年
7 韩海雯;MapReduce计算任务调度的资源配置优化研究[D];华南理工大学;2013年
8 项荣;开放环境中番茄的双目立体视觉识别与定位[D];浙江大学;2013年
9 王红斌;Web服务器集群系统的自适应负载均衡调度策略研究[D];吉林大学;2013年
10 张复宏;中国水果出口的贸易演进及优化策略研究[D];山东农业大学;2013年
中国硕士学位论文全文数据库 前10条
1 陈礼鹏;基于机器视觉的簇生猕猴桃果实多目标识别方法研究[D];西北农林科技大学;2018年
2 蒋亚杰;基于Kinect的人体姿态识别和机器人控制[D];深圳大学;2017年
3 葛兰梅(SEAN GRAHAM);猕猴桃收获装置设计与加工[D];华中农业大学;2017年
4 刘亚东;基于联动机构的猕猴桃采摘末端执行器研制[D];西北农林科技大学;2017年
5 李文洋;猕猴桃采摘机器人视觉导航路径生成方法研究[D];西北农林科技大学;2017年
6 马福明;黑龙江垦区农业机械化的发展历史及其影响研究[D];哈尔滨师范大学;2016年
7 王滨;猕猴桃采摘机器人目标果实空间坐标获取方法的研究[D];西北农林科技大学;2016年
8 黄佳;猕猴桃酒发酵及陈酿过程中多酚及多糖的变化规律[D];西北农林科技大学;2016年
9 陈子啸;猕猴桃采摘机器人移动平台的设计与仿真[D];西北农林科技大学;2016年
10 马风力;基于Kinect的自然人机交互系统的设计与实现[D];浙江大学;2016年
【相似文献】
中国期刊全文数据库 前10条
1 张军平;;多媒体武术系统在智能采摘机器人中的应用[J];农机化研究;2020年04期
2 彭天娥;;协同关系下多媒体运动与采摘机器人匹配设计研究[J];农机化研究;2020年08期
3 唐琳;陈诚;;农业采摘机器人[J];科技进步与对策;2019年03期
4 敖茂尧;;果蔬采摘机器人的研究现状与对策分析[J];装备制造技术;2019年03期
5 马茵;田磊;韩孟洋;;基于WIFI数字图像传输的采摘机器人交互终端研发[J];农机化研究;2018年05期
6 郑冰;杨文铂;李航;;采摘机器人无线通信系统设计—基于LTE-advanced与微粒群算法[J];农机化研究;2018年03期
7 谷利芬;谢芳;;基于多跳无线网络和机器视觉的新式采摘机器人设计[J];农机化研究;2018年03期
8 田磊;靳继红;;面向无线传感器网络节点的脐橙采摘机器人定位研究[J];农机化研究;2018年04期
9 张磊;;采摘机器人定位和导航研究—基于足球比赛动态路径规划[J];农机化研究;2018年06期
10 王娜;汤金金;;采摘机器人运动目标逼近方法研究——基于分裂迭代和模糊算法[J];农机化研究;2018年04期
中国重要会议论文全文数据库 前7条
1 何蓓;刘刚;;果树采摘机器人研究综述[A];2007年中国农业工程学会学术年会论文摘要集[C];2007年
2 魏锡光;王库;;仿自然环境条件下番茄采摘机器人设计研究[A];中国农业工程学会电气信息与自动化专业委员会、中国电机工程学会农村电气化分会科技与教育专委会2010年学术年会论文摘要[C];2010年
3 崔天时;陈天宏;;基于遗传算法的采摘机器人轨迹规划[A];黑龙江省农业工程学会2011学术年会论文集[C];2011年
4 石兴禄;邹湘军;卢俊;陈强;陈燕;王红军;刘天湖;;虚拟采摘机器人统一建模与三维动态仿真[A];庆祝中国力学学会成立50周年暨中国力学学会学术大会’2007论文摘要集(下)[C];2007年
5 袁挺;李伟;谭豫之;杨庆华;高峰;任永新;;温室环境下黄瓜采摘机器人信息获取技术研究[A];走中国特色农业机械化道路——中国农业机械学会2008年学术年会论文集(下册)[C];2008年
6 张殿明;时会美;;农业自动化领域中的机器人技术[A];Proceedings of 2010 National Vocational Education of Communications and Information Technology Conference (2010 NVCIC)[C];2010年
7 赵德安;姬伟;张超;李占坤;;果树采摘机器人控制系统设计[A];中国农业工程学会电气信息与自动化专业委员会、中国电机工程学会农村电气化分会科技与教育专委会2010年学术年会论文摘要[C];2010年
中国重要报纸全文数据库 前10条
1 王心馨 虞涵棋;美国公司开发出苹果采摘机器人[N];中国农机化导报;2017年
2 全媒体记者 李宁艳;“智慧农业”开启新疆种植新模式[N];乌鲁木齐晚报(汉);2017年
3 吕继东 赵德安 姬伟 陈玉;浅谈国内外采摘机器人[N];中国农机化导报;2014年
4 本报记者 段佳;果蔬采摘机器人有了三维视力[N];大众科技报;2009年
5 本报记者 吴佩;机器人摘棉花可以识别好与坏[N];农民日报;2011年
6 苏报驻园区首席记者 董捷;苹果熟不熟 机器“看”得出[N];苏州日报;2019年
7 本报记者 李慧;未来,我们这样搞农业[N];光明日报;2010年
8 本报记者 张伟;创新科技 让生活更精彩[N];中国高新技术产业导报;2013年
9 记者 吕兵兵 通讯员 李建忠;擎科技“大旗” 攀农业“珠峰”[N];农民日报;2012年
10 本报记者 刘欢;三万余市民高校田间追踪“食品安全”[N];北京日报;2012年
中国博士学位论文全文数据库 前10条
1 穆龙涛;全视场猕猴桃果实信息感知与连贯采摘机器人关键技术研究[D];西北农林科技大学;2019年
2 赵源深;西红柿采摘机器人目标识别、定位与控制技术研究[D];上海交通大学;2018年
3 李国利;多末端苹果采摘机器人设计与研究[D];南京农业大学;2017年
4 王丽丽;番茄采摘机器人关键技术研究[D];北京工业大学;2017年
5 贾伟宽;基于智能优化的苹果采摘机器人目标识别研究[D];江苏大学;2016年
6 顾玉宛;基于并行计算的苹果采摘机器人关键技术研究[D];江苏大学;2016年
7 戚利勇;黄瓜采摘机器人视觉关键技术及系统研究[D];浙江工业大学;2011年
8 谢忠红;采摘机器人图像处理系统中的关键算法研究[D];南京农业大学;2013年
9 吕强;柑橘采摘机器人工作场景信息感知技术与路径规划研究[D];江苏大学;2010年
10 王辉;机器视觉技术在果园自动化中的应用研究[D];中国农业机械化科学研究院;2011年
中国硕士学位论文全文数据库 前10条
1 严亚飞;智能枸杞采摘机器人枝条识别与定位关键技术研究[D];合肥工业大学;2019年
2 周斌;双臂采摘机器人自主连续作业建模与控制[D];上海交通大学;2018年
3 刘嘉超;基于信息融合的采摘机器人视觉识别与定位系统研究[D];华南理工大学;2019年
4 秦雁飞;基于双目视觉及深度学习的采摘机器人目标检测及定位技术研究[D];北京交通大学;2019年
5 王昌云;油茶果采摘机器人手眼标定技术研究[D];中南林业科技大学;2019年
6 张庆怡;苹果采摘机器人在线分级系统研究[D];南京农业大学;2017年
7 张月伟;基于遥操作的移动式水果采摘机器人平台的研制[D];南京农业大学;2017年
8 刘洒;柑橘采摘机器人重叠果实分割与定位方法研究[D];重庆理工大学;2019年
9 刘波;柑橘采摘机器人移动平台视觉导航系统研究[D];重庆理工大学;2019年
10 刘艳平;柑橘采摘机器人障碍物识别与定位方法研究[D];重庆理工大学;2019年
中国知网广告投放
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026