本发明公开了一种稀疏雷达和双目立体图像融合的3D目标检测方法及装置,方法包括:对立体图像和稀疏LiDAR深度图分别进行特征编码后,基于注意力融合模块,将两条路径的特征信息进行融合,所述融合是从LiDAR深度图到立体图像;基于立体区域提取网络输出相应的左右感兴趣区域,将融合后的左右特征图一起输入到立体回归网络分支和深度预测分支,用于对3D边界框的位置、尺寸和方向进行预测。装置包括:处理器和存储器。本发明将立体相机与4激光束LiDAR传感器信息进行融合来达到现有先进水平,并以端到端的形式进行高速度检测。
📄 2022104057094
📂 G06V10_80
👤 烟台大学
📅 2022-04-18