中国科学院机构知识库网格
Chinese Academy of Sciences Institutional Repositories Grid
基于视觉的服务机器人智能抓取研究

文献类型:学位论文

作者耿文杰
答辩日期2023-05-17
文献子类博士
关键词Service robot, Instance segmentation network, Elliptical cone potential field, Grasping task planning, Grasp detection network.
英文摘要

服务机器人良好的抓取操作能力是其提供优质服务的重要前提。现实抓取环境中经常存在背景干扰、其它物体干扰等问题,在这些复杂情形下实现机器人高质量的智能抓取,具有重要的理论研究意义和广泛应用前景。本文针对基于视觉的服务机器人智能抓取开展研究,论文的主要内容如下:

首先,介绍了服务机器人智能抓取的研究背景和研究意义,从物体检测与分割、机器人操作任务规划和机器人抓取检测三个方面进行了现状综述,并对论文内容和结构做了介绍。

其次,提出了一种基于自适应颈网络和空洞残差结构的实例分割方法。通过骨干网络对输入图像提取特征后,针对现有特征金字塔颈网络以逐层传递的方式融合特征,带来传输效率较低、特征挖掘能力弱的问题,设计了基于自上而下与自下而上双向融合的自适应颈网络,进行跨层特征传输和多尺度信息融合,并自适应地学习多尺度特征的权重以充分挖掘特征。而后,自适应颈网络输出的特征图通过物体检测分支和掩模原型分支获取实例分割结果。在掩模原型分支中,嵌入了空洞残差结构以捕获更多不同感受野的信息,克服了现有掩模原型分支因缺乏较好的上下文信息挖掘造成实例分割特别是掩模质量降低的问题。在数据集和实际场景实验表明了所提方法的有效性。

第三,在目标物体受到干扰不能被直接抓取情形下,针对现有方法基于矩形或圆形禁区构建势场函数进而计算干扰物体的搬移落点难以有效利用操作空间的问题,本文提出了基于椭圆锥势场的机器人搬移方法。以最小椭圆包络描述禁区从而全面地表征物体的位置、尺寸、朝向等要素,并设计椭圆锥函数反映物体对环境的影响以同离心率向外辐射时的作用规律,进而构造椭圆锥引力势场和椭圆锥斥力势场描述不同角色的物体对环境的影响,其中,当前待抓取物体和其他物体分别产生引力势场和斥力势场。进一步,利用叠加后的合势场确定当前待抓取物体的搬移落点。实际搬移实验证明了所提方法的有效性。

第四,针对现有操作任务规划方法在干扰物体较多时,生成操作序列效率较低的问题,提出了一种基于信息密度谱聚类与启发式搜索的机器人操作任务规划方法。考虑到物体位置、尺寸和朝向等因素构建抓取场景图,以物体为节点,利用物体间空间约束得到连接边,并给出信息密度函数描述物体之间的相互影响进而计算边权,在此基础上,采用谱聚类缩减机器人搜索空间以提升搜索效率,并通过目标捆绑获得任务导向图。进而设计启发式搜索算法,结合机器人位置、操作约束、物体之间和物体与机器人之间的关系等要素,启发式选取待抓取物体,递归搜索生成抓取序列,最后择优确定最佳抓取链,其有效性在实际场景中进行了验证。

第五,提出了一种基于分层式多尺度特征融合与逆交叉残差的抓取检测网络。针对现有基于编码器-解码器的抓取检测网络在解码过程中,主要使用编码器高层特征而导致细节信息丢失的问题,设计结合注意力机制的跳层连接模块,兼顾了编码器的低层和高层特征并进行多尺度特征融合以获取更丰富的特征。而且,设计了逆交叉残差模块挖掘编码器高层特征中丰富的通道信息,增强特征表达能力。进一步,跳层连接输出的多尺度特征和逆交叉残差模块输出的特征在解码器中进行逐层的深度融合,以获取高质量的抓取检测结果。数据集和实际场景中的实验表明了所提方法的有效性。

第六,设计了服务机器人智能抓取软件架构,包括场景感知层、抓取任务规划层、椭圆锥势场搬移层、抓取检测层和抓取控制层,在ROSRobot Operating System)框架下实现了所提实例分割方法、椭圆锥势场搬移方法、机器人操作任务规划方法、抓取检测方法的集成。实际场景的机器人抓取操作实验验证了其有效性。

最后,对本文工作进行了总结,并指出了需要进一步开展的研究工作。

语种中文
页码132
源URL[http://ir.ia.ac.cn/handle/173211/52068]  
专题毕业生_博士学位论文
推荐引用方式
GB/T 7714
耿文杰. 基于视觉的服务机器人智能抓取研究[D]. 2023.

入库方式: OAI收割

来源:自动化研究所

浏览0
下载0
收藏0
其他版本

除非特别说明,本系统中所有内容都受版权保护,并保留所有权利。