面向开放环境无人平台的持续目标检测算法研究
文献类型:学位论文
| 作者 | 冯航涛
|
| 答辩日期 | 2024-05-13 |
| 文献子类 | 博士 |
| 关键词 | 持续学习 目标检测 持续目标检测 无人平台 |
| 英文摘要 | 在实际应用中,无人平台所处的场景通常具有开放性,与静态场景不同,开放场景中会不断出现与已知类别或者域不同的目标,这增加了无人平台长期稳定进行目标检测的难度。此外,无人平台由于自身的硬件和算力限制,以及隐私问题的考量,难以大量保存已知类别或者域的样本。因此,具有持续学习能力的目标检测技术对于无人平台的感知发育和知识增长具有非常重要的实际意义。然而,当前开放环境下无人平台的持续目标检测研究仍面临多个挑战和问题。首先,持续目标检测的评价框架和指标缺乏统一,导致难以有效比较不同算法的性能;其次,全天候场景的数据集不足,限制了算法在光线较弱或视觉不清的环境中的应用效果;特别是在数据有限的战场环境下,现有算法因依赖大量数据而难以有效快速地识别新型目标;最后,算法在实际应用中的性能评估与其在静态数据集上的测试结果存在差异,这影响了算法在动态真实世界任务中的可靠性。这些问题共同阻碍了持续目标检测技术在实际应用中的发展。因此,本研究旨在针对以上开放环境下无人平台视觉感知的问题,结合持续目标检测任务,展开面向开放环境无人平台目标检测算法的研究,具体如下:
(2)基于无人机平台的持续目标检测数据集及模态感知门控知识蒸馏持续目标检测算法:针对无人机全天候目标检测任务,本文搭建了一种基于无人机平台的多模态数据集,结合了彩色和红外图像,包括16000对已对齐的图像,以及丰富的目标检测标签,旨在推动相关领域的研究。同时,本文根据提出的数据集,设计了一种针对多模态数据的模态感知门控知识蒸馏持续目标检测算法。该算法通过自训练方法学习多模态特征表示,通过使用与域相关的门函数来筛选与域相关的特征,以解决知识蒸馏过程中特征筛选的问题。同时,本文使用该知识蒸馏方法将知识从旧模型蒸馏到新模型中,结合旧模型生成的伪标签,提高了模型的抗遗忘能力,以降低灾难性遗忘对持续目标检测的影响。在提出的彩色-红外多模态无人机数据集上验证了算法的有效性,可以大幅度提高模型的抗遗忘能力。 (3)基于知识迁移的小样本持续目标检测算法:在面对复杂多变的开放环境时,采集大量数据是一项困难且昂贵的任务。因此,如何在少量样本条件下有效地进行持续目标检测是一个普遍存在的问题。为了解决这个问题,本文将开展基于知识迁移的小样本持续目标检测算法的研究。作者提出了两种创新性的算法模型:多类头(Multi-Class Head, MCH)模型和双路径多类头(Bi-Path Multi-Class Head, BPMCH)模型。MCH模型在检测新类时为每个新类添加一个新的分类头,对新类目标的特征进行分类检测。BPMCH模型在此基础上,为新类复制了一个新的骨干网络和特征金字塔网络(Feature Pyramid Network, FPN),并使用基类网络的参数进行初始化,以更好地传递基类知识。在训练过程中,作者先在基类上充分训练检测模型,然后在新类少量数据上微调新的分类头和骨干网络,实现增量学习。此外,本文在头部结构中设计了新旧特征交互机制,充分利用基类和新类的特征信息,进一步提高算法性能。在具有挑战性的MS COCO数据集上显著提升了检测效果,在精度上超越了当时性能最好的方法。 (4) 开放环境无人机视觉感知系统搭建及算法验证: 将理论方法和关键技术应用于实际生产和生活,进而解决真实场景中的关键问题,具有重要的意义和价值。本文以现有的持续目标检测技术为基础,结合新搭建的共轴双旋翼无人机视觉感知系统,利用目标检测算法、迫近下降算法、薄弱位置定位和6D姿态估计算法完成了典型的军事场景任务。并且结合该平台,本文也证实了所提出的持续目标检测方法在真实开放场景中的有效性,为相关领域的研究和实践奠定了坚实的基础。 |
| 语种 | 中文 |
| 页码 | 134 |
| 源URL | [http://ir.ia.ac.cn/handle/173211/56498] ![]() |
| 专题 | 毕业生_博士学位论文 |
| 推荐引用方式 GB/T 7714 | 冯航涛. 面向开放环境无人平台的持续目标检测算法研究[D]. 2024. |
入库方式: OAI收割
来源:自动化研究所
其他版本
除非特别说明,本系统中所有内容都受版权保护,并保留所有权利。

