一种适用于模态缺失的多模态目标检测方法及系统
实质审查的生效
摘要

本发明公开了一种适用于模态缺失的多模态目标检测方法及系统,该方法包括如下步骤:S1、将数据集中的多模态数据对神经网络单元进行训练;将数据集的所有模态数据输入进训练好的神经网络单元进行检测,保存检测结果;S2、对其余维度的模态数据进行提取;利用生成网络单元生成伪模态特征张量,接着进行拼接,输入进注意力网络单元、信息融合单元、判别网络单元,直至完成对生成网络单元的训练;S3、通过数据采集设备实时采集模态数据,利用训练完成的神经网络单元生成目标的种类和标识。本发明方法在避免噪声引入和特征信息丢失的前提下,通过虚拟生成缺失的模态数据,极大程度上减小了模型的计算量以及复杂度,可以提高生成模态的表示一致性。

基本信息
专利标题 :
一种适用于模态缺失的多模态目标检测方法及系统
专利标题(英):
暂无
公开(公告)号 :
CN114359586A
申请号 :
CN202111456527.1
公开(公告)日 :
2022-04-15
申请日 :
2021-12-01
授权号 :
暂无
授权日 :
暂无
发明人 :
程腾孙磊张峻宁陈炯石琴丁莉
申请人 :
合肥工业大学
申请人地址 :
安徽省合肥市屯溪路193号
代理机构 :
合肥维可专利代理事务所(普通合伙)
代理人 :
吴明华
优先权 :
CN202111456527.1
主分类号 :
G06V10/72
IPC分类号 :
G06V10/72  G06V10/80  G06V10/74  G06V10/774  G06V10/82  G06K9/62  G06N3/04  G06N3/08  
法律状态
2022-05-03 :
实质审查的生效
IPC(主分类) : G06V 10/72
申请日 : 20211201
2022-04-15 :
公开
注:本法律状态信息仅供参考,即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载
  • 联系电话
    电话:023-6033-8768
    QQ:1493236332
  • 联系 Q Q
    电话:023-6033-8768
    QQ:1493236332
  • 关注微信
    电话:023-6033-8768
    QQ:1493236332
  • 收藏
    电话:023-6033-8768
    QQ:1493236332