把Waymo玩成GTA游戏！全生成式的车辆行驶轨迹视频合成器来了

主要观点总结

AIxiv专栏是机器之心的一个栏目，用于发布学术、技术内容。该专栏过去数年里报道了2000多篇内容，涉及全球各大高校与企业的顶级实验室。文章主要介绍了机器之心新推出的基于生成模型的新视角合成方法FreeVS。FreeVS能够作为生成引擎渲染真实场景中任意车辆行驶轨迹下的视频，可直接部署于任何测试场景，无需进行耗时的场景重建过程。此外，FreeVS还可以模拟车辆变线行驶、替换场景车辆、定制车辆运动等。

关键观点总结

关键观点1: AIxiv专栏简介及背景

该专栏是机器之心发布学术、技术内容的栏目，过去数年里报道了2000多篇内容，覆盖全球各大高校与企业的顶级实验室。

关键观点2: FreeVS技术介绍

FreeVS是一个全生成式的新视角合成方法，能够渲染真实场景中任意车辆行驶轨迹下的视频，无需进行场景重建。

关键观点3: FreeVS技术特点

FreeVS采用简洁有效的生成管线，可严格基于已观测到的三维场景生成任意视角的相机观测。它解决了基于重建的方法无法合理渲染新视角图像和场景重建耗时长的问题。

关键观点4: FreeVS的应用场景

FreeVS能模拟车辆变线行驶、替换场景车辆、定制车辆运动等，并且可以进行新相机模拟，合成虚拟相机位置上的成像。

关键观点5: 与现有方法的比较

与基于重建的方法相比，FreeVS在新轨迹模拟和新相机模拟方面表现更优秀，几乎不受图像模糊、伪影等现象困扰。