[论文解读] Facing ADAS validation complexity with usage oriented testing

Laurent Raffaelli, Frederique Vallée+7 more|arXiv (Cornell University)|Feb 22, 2016

Software Reliability and Analysis Research被引用 15

一句话总结

本文提出一种以使用场景为导向的测试框架，以应对高级驾驶辅助系统（ADAS）验证日益增长的复杂性，特别是基于摄像头的功能。通过聚焦真实世界驾驶场景和代表性使用模式，该方法减少了对全面物理测试的依赖，实现了更高效、更精准的验证，同时确保在多样化运行条件下具备鲁棒性和安全性。

ABSTRACT

Validating Advanced Driver Assistance Systems (ADAS) is a strategic issue, since such systems are becoming increasingly widespread in the automotive field. ADAS bring extra comfort to drivers, and this has become a selling point. But these functions, while useful, must not affect the general safety of the vehicle which is the manufacturer's responsibility. A significant number of current ADAS are based on vision systems, and applications such as obstacle detection and detection of pedestrians have become essential components of functions such as automatic emergency braking. These systems that preserve and protect road users take on even more importance with the arrival of the new Euro NCAP protocols. Therefore the robustness and reliability of ADAS functions cannot be neglected and car manufacturers need to have tools to ensure that the ADAS functions running on their vehicles operate with the utmost safety. Furthermore, the complexity of these systems in conjunction with the nearly infinite number of parameter combinations related to the usage profile of functions based on image sensors push us to think about testing optimization methods and tool standards to support the design and validation phases of ADAS systems. The resources required for the validation using current methods make them actually less and less adapted to new active safety features, which induce very strong dependability requirements. Today, to test the camera-based ADAS, test vehicles are equipped with these systems and are performing long hours of driving that can last for years. These tests are used to validate the use of the function and to verify its response to the requirements described in the specifications without considering the functional safety standard ISO26262.

研究动机与目标

• 应对现代ADAS功能验证日益增长的复杂性和资源密集性，特别是依赖视觉系统功能的验证。
• 克服传统测试方法依赖长时间、大规模物理驾驶测试所带来的局限性。
• 通过聚焦代表性真实世界使用模式而非全面参数组合，提升验证效率。
• 确保ADAS功能在多样化驾驶条件下的功能安全性和可靠性，尤其是在新的欧洲新车评估计划（Euro NCAP）协议背景下。
• 支持汽车工业在不产生高昂测试成本的前提下，满足主动安全系统严格可靠性要求。

提出的方法

• 开发一种以使用场景为导向的测试方法，基于实际使用模式的统计分析，优先考虑真实世界驾驶场景。
• 识别并建模与ADAS功能（如自动紧急制动）相关的关键使用模式，例如城市道路、高速公路和低能见度条件。
• 利用这些使用模式生成有针对性的测试用例，反映高影响的运行场景，而非随机或全面的组合。
• 将该方法整合到设计与验证生命周期中，指导开发与验证流程。
• 利用真实世界驾驶数据和仿真数据校准测试覆盖范围，并优先处理安全相关性更高的边缘情况。
• 通过场景驱动的高保真验证替代广谱测试，减少对持续数年物理测试驾驶的依赖。

实验结果

研究问题

• RQ1 在视觉系统参数组合呈指数级增长的背景下，如何使ADAS验证更加高效？
• RQ2 真实世界使用模式在提升测试覆盖范围和缩短验证时间方面发挥何种作用？
• RQ3 以使用场景为导向的测试在多大程度上可以替代传统长时间的物理测试用于ADAS功能？
• RQ4 该方法如何确保在不进行全面测试的前提下，充分覆盖与安全相关的边缘情况？
• RQ5 选择能反映高风险或高影响驾驶场景的代表性使用模式的关键标准是什么？

主要发现

• 以使用场景为导向的测试显著减少了对长时间物理测试驾驶的依赖，聚焦于高影响的真实世界场景。
• 该方法实现了对基于摄像头的ADAS功能（如行人和障碍物检测）更高效、更精准的验证。
• 通过建模代表性使用模式，该方法在提升测试覆盖范围的同时降低了验证过程中的资源消耗。
• 该框架通过确保在关键条件下的鲁棒性，支持符合ISO 26262等功能安全标准。
• 该方法增强了在新法规要求（如Euro NCAP引入的要求）下验证ADAS功能的能力。
• 从全面测试向基于场景的验证转变，带来了更短的开发周期和更强的安全保障。