[论文解读] A New Wave in Robotics: Survey on Recent mmWave Radar Applications in Robotics

Kyle Harlow, Hyesu Jang+3 more|arXiv (Cornell University)|May 2, 2023

Advanced SAR Imaging Techniques被引用 4

一句话总结

本综述探讨了毫米波雷达在机器人领域日益增长的作用，强调其在雾、灰尘等恶劣条件下相较于相机和激光雷达的优势。综述涵盖了定位、建图、目标检测和语义分割等应用，重点强调了FMCW雷达在复杂环境中的鲁棒性及其在融合或独立使用方面的潜力。

ABSTRACT

We survey the current state of millimeterwave (mmWave) radar applications in robotics with a focus on unique capabilities, and discuss future opportunities based on the state of the art. Frequency Modulated Continuous Wave (FMCW) mmWave radars operating in the 76--81GHz range are an appealing alternative to lidars, cameras and other sensors operating in the near visual spectrum. Radar has been made more widely available in new packaging classes, more convenient for robotics and its longer wavelengths have the ability to bypass visual clutter such as fog, dust, and smoke. We begin by covering radar principles as they relate to robotics. We then review the relevant new research across a broad spectrum of robotics applications beginning with motion estimation, localization, and mapping. We then cover object detection and classification, and then close with an analysis of current datasets and calibration techniques that provide entry points into radar research.

研究动机与目标

• 分析毫米波雷达在机器人应用中的当前状态，重点关注其相较于相机和激光雷达等传统传感器的独特优势。
• 识别毫米波雷达在视觉退化环境（如雾、灰尘和烟雾）中表现优异的关键机器人应用。
• 回顾基于雷达的定位、建图、目标检测和语义分割方面的最新算法进展。
• 突出开放的研究挑战，包括6自由度定位、3D雷达建图、在线校准，以及对车辆和行人以外对象的语义标注。
• 倡导开发标准化基准和数据集，以加速机器人领域中的雷达研究，类似于相机和激光雷达领域的KITTI数据集。

提出的方法

• 调研近期关于毫米波雷达在机器人中应用的文献，重点关注工作在76–81 GHz频段的FMCW雷达。
• 分析与机器人相关的雷达原理，包括距离、多普勒速度和角度分辨率，及其对感知任务的影响。
• 对运动估计、定位、建图、目标检测和语义分类等领域的雷达应用进行分类与综述。
• 评估现有数据集（如Boreas）和校准技术，包括离线校准和潜在的在线校准方法。
• 从数据密度、分辨率、对视觉退化的鲁棒性以及工作范围等方面，比较雷达与相机和激光雷达的性能。
• 提出未来研究方向，如全景雷达分割、与神经辐射场的融合，以及面向规划的改进3D建图。

实验结果

研究问题

• RQ1 毫米波雷达在雾、灰尘和烟雾等视觉退化环境中为何能优于相机和激光雷达？
• RQ2 基于雷达的定位与建图面临哪些关键算法挑战？近期在6自由度和长期鲁棒性方面有哪些进展？
• RQ3 毫米波雷达在语义感知方面（包括目标分类和全景分割）的潜力有多大？
• RQ4 雷达传感器校准方面存在哪些开放挑战，特别是针对距离和速度的在线内参校准？
• RQ5 如何超越点云，充分利用完整的雷达波形，以实现如穿墙感知或增强3D重建等新能力？

主要发现

• 由于波长较长，毫米波雷达能够穿透雾、灰尘和烟雾，因此在视觉退化环境中表现鲁棒，而相机和激光雷达则会失效。
• 工作在76–81 GHz频段的FMCW毫米波雷达具备高分辨率和长距离探测能力，能生成密集数据，适用于运动估计和建图。
• 基于雷达的定位系统目前误差约为10 cm，仍落后于激光雷达的约5 cm，表明通过改进传感器和算法仍有提升空间。
• 尽管2D雷达定位已较为成熟，6自由度雷达定位仍是开放挑战，尤其在高速无人机和动态环境中。
• 语义雷达感知正在兴起，已有早期工作针对车辆和行人进行分类，但对家庭和医院等室内环境的广泛标注仍研究不足。
• Boreas数据集等基准数据集对推进雷达里程计和定位至关重要，其采用有望加速该领域的研究。