北大一篇端到端KnowVal：懂法律、有价值观的智能驾驶系统

主要观点总结

文章介绍了来自北京大学王选计算机研究所的最新工作KnowVal，这是一种针对智能驾驶系统的知识增强和价值引导方案。KnowVal系统通过感知模块与知识检索模块的协同作用，实现视觉-语言推理能力，涵盖交通法规、防御性驾驶原则与道德考量的综合驾驶知识图谱，并构建了高效的基于大型语言模型的检索机制。实验表明，KnowVal在nuScenes数据集上实现了最低碰撞率，并在Bench2Drive基准测试中取得最先进的性能。文章还介绍了KnowVal的系统框架、模块功能、驾驶知识图谱构建、价值模型构建和实验结果等。

关键观点总结

关键观点1: KnowVal系统介绍

KnowVal是一种知识增强和价值引导的智能驾驶系统，由北京大学王选计算机研究所的团队开发。该系统通过感知模块与知识检索模块的协同作用，实现视觉-语言推理能力。

关键观点2: 系统框架和特点

KnowVal系统包括感知模块、知识检索模块、规划模块和价值模型等。其特点是通过感知和知识检索的相互引导实现视觉-语言推理，构建涵盖交通法规、防御性驾驶原则与道德考量的综合驾驶知识图谱，并设计了价值模型进行价值评估。

关键观点3: 实验结果

KnowVal系统在nuScenes数据集上实现了最低碰撞率，并在Bench2Drive基准测试中取得最先进的性能。作者还提供了几个定性分析样例，以说明KnowVal的实际效果。

关键观点4: 作者和团队介绍

该论文的第一作者和通讯作者均来自北京大学王选计算机研究所的VDIG实验室，作者团队在CV领域的顶会顶刊上有多项重量级成果发表。