详细信息
文献类型:专利
中文题名:一种基于多模态融合的海上目标探测方法及装置
作者:尹建川[1];许国康[1];王妮妮[1];唐启师[1];杨振[1];
机构:[1]广东海洋大学;
专利类型:发明专利
申请号:CN202510932872.X
申请日:20250708
申请人地址:524088 广东省湛江市麻章区海大路1号
公开日:20250805
代理人:何梓龙
代理机构:广州专理知识产权代理事务所(普通合伙) 44493
语种:中文
中文关键词:多模态;融合;海上;目标探测;同一场景;可见光图片;红外成像;成像图片;同步;输入;GhostNet;双流;主干网络;特征输入;注意力;特征融合模块;尺度;交互模块;AIFI;行尺;交换;输出结果;卷积神经网络;跨尺度;CCFF;特征交互;混合编码器;不确定性;查询;选择
中文摘要:本发明涉及一种基于多模态融合的海上目标探测方法及装置,包括以下:获取海上同一场景的可见光图片和红外成像图片,并将所述可见光图片和红外成像图片同步输入基于GhostNet构建的双流主干网络;于双流主干网络的第三至第五层,分别提取可见光图片以及红外成像图片的特征,并将这些特征输入至跨模态注意力特征融合模块进行跨模态特征融合得到融合特征,之后将融合特征输入AIFI模块与CCFF模块共同组成的混合编码器中处理后得到跨尺度的特征交互与融合结果;跨尺度的特征交互与融合结果经过不确定性最小查询选择后输入解码器,完成海上目标探测。本发明通过融合可见光、红外的模态数据,可在复杂海况下提升小目标的探测成功率。
参考文献:
正在载入数据...