电讯技术

作者：黄晓红,田子然,徐坤强

单位：(1.华北理工大学 人工智能学院，河北 唐山 063210;2.河北省工业智能感知重点实验室，河北 唐山 063210)

关键词：三维目标检测；毫米波雷达；视觉传感器；传感器融合；残差多层感知机；

针对毫米波雷达和相机融合进行三维目标检测时毫米波雷达点云特征提取不充分、雷达点云投影到2D图像平面时丢失空间信息造成空间关系捕捉不足，导致目标漏检和错检的问题，提出了一种基于残差多层感知机(Residual Multilayer Perceptron，ResMLP)的雷达相机融合三维目标检测方法(ResMLP-Fusion)。首先，利用图像特征提取器提取多视角图像的特征；其次，利用雷达点云的位置信息和雷达截面信息将点云聚类后输入到设计的ResMLP网络中提取雷达点云特征，用于后续与图像特征融合；然后，将雷达特征和图像特征利用可变形注意力机制进行采样融合之后再更新查询，最后输入到解码器进行解码，对目标进行三维边界框预测和类别预测，并对预测结果进行迭代，以改进预测结果的准确性，实现具有准确性和鲁棒性的三维目标检测。在nuScenes数据集上对所提方法进行评估，其平均精度达到了0.404，nuScenes检测得分达到了0.518。

来源：2025年第10期

《电讯技术》期刊编辑部

查看电讯技术杂志2025年第10期