AI交流(进群备注:ACT-Bench)

ACT-Bench 是一个开源的评估框架,专注于自动驾驶世界模型的行动可控性。它帮助研究人员量化模型在给定特定轨迹时生成驾驶场景的能力,例如如何根据预设路径生成逼真的驾驶视频。该框架包括一个基于 nuScenes 的大型数据集和一个名为 Terra 的基准模型,用于评估模型的行动保真度。ACT-Bench 通过生成视频并与地面真相比较来量化模型的行动可控性,支持研究人员测试其自己的世界模型,并与基准模型进行比较。
ACT-Bench的特点:
- 1. 开源访问:任何研究人员都可以免费使用该框架。
- 2. 量化行动保真度:评估模型生成场景与预期轨迹的匹配程度。
- 3. 数据集支持:包括一个大型数据集,基于 nuScenes,提供短视频和未来轨迹数据。
- 4. 基准模型:提供了一个名为 Terra 的基准模型,用于比较和测试。
ACT-Bench的功能:
- 1. 克隆 GitHub 仓库并设置环境,准备输入轨迹。
- 2. 使用待评估模型生成视频,并保存到指定目录。
- 3. 运行脚本计算得分,评估模型的行动可控性。
- 4. 复现论文结果,下载预生成视频并运行特定脚本。
相关导航
暂无评论...