天骏手表网站,彩票网站建设一条龙,著名网站设计师,丢盖网logo设计免费基于汽车雷达检测点的深度实例分割
一个区别#xff1a;
automotive radar 汽车雷达 #xff1a;
分辨率低#xff0c;点云稀疏#xff0c;语义上模糊#xff0c;不适合直接使用用于密集LiDAR点开发的方法 #xff1b;
返回的物体图像不如LIDAR精确#xff0c;可以…基于汽车雷达检测点的深度实例分割
一个区别
automotive radar 汽车雷达
分辨率低点云稀疏语义上模糊不适合直接使用用于密集LiDAR点开发的方法
返回的物体图像不如LIDAR精确可以在雨雪雨夹雪冰雹雾泥和尘土中返回
在夜间和阴天条件下也比激光雷达更准确
发出的是无线电波而不是激光束
LiDAR 激光雷达
激光波比无线电波短因此激光雷达可以生成更详细的物体图像贵 左 LiDAR右 RADAR 提出问题
从无线电雷达在点云实例分割上的实际问题出发 问题一雷达测点由于分辨率较低比激光雷达测点云更稀疏、噪声更大缺乏语义和几何信息一些几何信息例如物体的形状不能通过点的分布来反映从而导致局部信息的缺乏。 问题二: 汽车驾驶需要对雷达数据进行实时处理的算法雷达处理系统中的微中心单元(MCU)限制了模型的存储空间和可用的计算能力。 分析问题
针对问题一全局特征信息可以帮助分割任务该如何设计一种深度学习算法来解决雷达检测点的稀疏性和模糊性 ,因为主流的pointnet是模仿卷积思维按照提取局部特征的思维来设计的要很深的网络才能学到全局相互作用
针对问题二性能提高的同时要兼顾实际场景尽量轻量化
解决方案
1、针对汽车雷达稀疏检测点的实例分割任务设计了一种基于语义分割的聚类方法。该模型是基于PointNet的语义分割版本设计的新引入的头部估计点向中心偏移向量(CSV)--它表示从每个检测点到其相应实例的几何中心的偏移量。在聚类过程中利用预测的CSV将每个点向其实例的中心移动从而使属于同一实例的点更加接近提高聚类精度
2、使用余弦相似性损失和归一化内积损失的和作为稀疏雷达检测点的语义分割训练过程中的损失以提高性能的CSV引导聚类----为上述提出的中心偏移量适配的损失来最小化 预测CSV 和ground-truth CSV之间的距离
3、提出使用gMLP来进一步提高模型的性能
得到的效果
平均覆盖率(mCov)和平均精度(mAP)分别比基于聚类的分类方法高9.0%和9.2%比端到端实例分割方法高8.6%和9.1%。同时该方法及其轻量级版本的内存消耗保持在1MB左右推理时间小于40 ms适用于汽车雷达单片机
具体做法 N为样本量;C表示主干网络的输出通道数;Nclass是类的数量;Ndim为雷达原始探测点的尺寸。输入点首先通过逐点分类分支获得其预测类标号。然后根据csv预测分支对其预测的csv进行移动使属于同一实例的点更加集中。然后具有相同类标签的点被聚成簇(即实例)。在样例帧的实例分割结果中不同的颜色表示不同的类同一个圆中的点属于同一个实例。 (a)PointNet主干网络采用两个SA水平和两个FP水平的结构提取点特征
(b)预测头的结构预测头为两层mlp语义分割分支预测每个点的每个类的得分而对于csv预测分支预测每个点与其实例中心之间的差异。
(c) csv的图解同一圆内的点属于同一实例
(d)可视化的整体结构的MLP增强PointNet主干网络。可视化的MLP块在每个集合抽象级别和特征传播级别之后添加gMLP 学习参考
gmlp结构要看下原论文 Pay Attention to MLPs
实验上的叙述
