Operating Within the Operational Design Domain: Zero-Shot Perception with Vision-Language Models<br>在运行设计域内运行：基于视觉语言模型的零样本感知<br>[摘要](abstracts/2605.07649.html)

Abstract (EN)

Abstract not available.

摘要 (ZH)

过去几年，自主系统的研究已成熟到如此程度，以至于该领域越来越能够将研究成果转化为在明确界定的领域内以利益相关者为驱动的实际用例。然而，要实现自主系统的大规模实际应用，遵守安全法规至关重要。许多法规受到运行设计域（ODD）的影响，ODD定义了自主代理能够运行的具体条件。这对于自动驾驶系统（ADS）尤其相关，因为对ODD要素的可靠感知对于安全实施和审计至关重要。视觉语言模型（VLM）整合了视觉识别和语言推理，无需特定任务的训练数据即可运行，这使得它们适用于适应性强的ODD感知。为了评估VLM能否作为适应不断演变的定义的零样本“ODD传感器”，我们贡献了：(i) 一项使用四种VLM在自定义数据集和Mapillary Vistas上进行的零样本ODD分类与检测的实证研究，并包括失败分析；(ii) 对零样本优化策略的消融研究，附有成本-性能概览；(iii) 一套可复用的提示模板及其适配指南。我们的研究结果表明，结合角色分解的基于定义的链式思维提示表现最佳，而其他方法可能导致召回率下降。总体而言，我们的结果为安全关键应用中透明且有效的基于ODD的感知铺平了道路。

← Back