为了解决真实大规模场景下基于激光雷达点云数据的3D目标检测难题，新葡的京集团35222vip的许廷发教授科研团队开展了人工智能3D目标检测方法研究，取得了突破性进展。该研究成果以题为“MsSVT++: Mixed-scale Sparse Voxel Transformer with Center Voting for 3D Object Detection”的论文形式发表在国际顶级期刊《IEEE Transactions on Pattern Analysis and Machine Intelligence》上。IEEE TPAMI作为人工智能、模式识别和图像处理等领域的顶级权威期刊，其影响因子为23.6，是中国计算机协会（CCF）推荐的人工智能领域A类期刊。论文的第一作者为新葡的京集团35222vip李佳男副研究员，通讯作者为许廷发教授。

针对真实大规模场景中存在的远距离目标误检漏检和3D检测模型在精度和计算效率之间难以平衡的瓶颈问题，科研团队提出了一种全稀疏体素Transformer点云特征提取网络架构(MsSVT)，如图1所示。该网络架构引入了混合尺度注意力机制，捕获感兴趣目标的局部细粒度几何信息与长程上下文信息；运用三维空间中非空体素的稀疏特性，仅对非空体素位置执行混合尺度注意力操作，从而提升了计算效率，实现了高效的激光雷达点云3D目标检测。

图1. MsSVT点云特征提取网络架构图

该方法基于混合尺度注意力机制的强大多尺度特征捕获能力(见图2(a)-(d))，在大规模Waymo数据集上的检测精度超过了同期性能最优的双阶段检测器。图2(e)-(f)展示了部分在Waymo数据集上的部分检测结果，该方法可以精确检测仅具有极度稀疏点云表示的远距离车辆目标，并在处理带有巨大尺度变化的密集行人时也表现出优异的性能。

图2.注意力图(a)-(d)及目标检测结果可视化(e)-(f)

该研究成功克服了三维场景中由于远距离目标点云极度稀疏而导致的目标定位困难以及漏检等问题，实现了精度与计算效率的平衡，为真实大规模场景下基于激光雷达点云数据的3D目标检测及应用提供了方法和关键技术支持。

论文详情：J. Li, S. Cong, L. Ding and T. Xu, MsSVT++: Mixed-scale Sparse Voxel Transformer with Center Voting for 3D Object Detection, in IEEE Transactions on Pattern Analysis and Machine Intelligence, doi: 10.1109/TPAMI.2023.3345880.

论文链接：https://ieeexplore.ieee.org/document/10371785

论文第一作者简介：

李佳男，博士，新葡的京集团35222vip预聘助理教授（特别副研究员），新加坡国立大学博士后。主要从事光电成像目标探测与识别等方面的研究，主持国家自然科学基金等项目 5 项。以第一/共一作者发表IEEE TPAMI 4篇，IEEE TNNLS、CVPR等论文11篇，ESI高被引论文1篇；以通讯作者发表论文40余篇；谷歌学术总引4000余次。入选中国科协及北京市科协“青年人才托举工程”项目，获得中国图象图形学学会优秀博士学位论文，王大珩光学奖等荣誉。指导学生获得 ICCV 2021“反无人机跟踪”挑战赛国际冠军及最佳论文奖、第四届“空天杯”创新创意大赛二等奖、中国高等教育博览会“校企合作 双百计划”典型案例等。研究成果在“中国天眼”等国家重大科技基础设施中得到重要应用。

论文通讯作者简介：

许廷发，博士，国家一级重点学科“光学工程”学科责任教授，博士研究生导师。光电成像技术与系统教育部重点实验室主任，新葡的京集团35222vip重庆创新中心智能化和大数据技术实验室主任。近年来带领其科研团队围绕光电成像探测与识别、计算成像和人工智能等领域不断深化研究。主持承担国家自然科学基金委重大科研仪器研制项目等50多项。在国际、国内等系列期刊发表学术论文190余篇，其中被SCI/EI收录100余篇。以第一发明人申请国家发明专利87项，已授权和公示35项。获国防科技进步二等奖等奖项3项。指导研究生获得中国图象图形学学会优秀博士学位论文，二人次获得王大珩高校学生光学奖，二人次获得全国光学与光学工程博士生学术联赛全国百强，获得中国高等教育博览会“校企合作 双百计划”典型案例和重庆英才创新创业示范团队等荣誉称号。