全新的黎亮 Cosmos Predict-2 国际根底模型与 CARLA 的集成加快了。智能。点全轿车练习 。黎亮
辅佐驾驭仓库正在从许多不同的点全模型演变为一致的端到端架构,端到端架构可直接依据。黎亮传感器。点全数据履行驾驭操作 。黎亮这种向运用大模型的点全过渡大大增加了对用于练习 、测验和验证的黎亮高质量、根据物理学传感器数据的点全需求 。
为加快下一代辅佐驾驭架构的黎亮开发 ,NVIDIA 发布了NVIDIA Cosmos Predict-2,点全这是黎亮一种全新的国际根底模型 ,具有更强的点全未来国际状况猜测才能 ,可生成高质量的黎亮组成数据,以及新的。开发者。东西。
Cosmos Predict-2 是 NVIDIA Cosmos 渠道的一部分 ,该渠道为开发者供给了应对端到端辅佐驾驭开发中最杂乱应战的技能。Oxa、Plus 与 Uber 等职业领导者正在运用 Cosmos 模型快速扩展辅佐驾驭开发的组成数据生成 。
Cosmos Predict-2 加快智能轿车练习。
Cosmos Predict-1 可经过文本 、图画和。视频。提示猜测并生成未来国际状况 。在 Cosmos Predict-1 的根底上 ,Cosmos Predict-2 可更好地了解文本和视觉输入的上下文,然后削减错觉,使生成的视频细节更丰厚。
Cosmos Predict-2 经过增强文字了解和常识推理水平,
优化了路口泊车标志的辨认作用 。
经过运用最新的优化技能 ,Cosmos Predict-2 明显加快了 NVIDIA DGX Cloud 上组成数据的生成速度。
经后练习的 Cosmos 模型解锁了新的练习数据源。
经过在辅佐驾驭数据集上对 Cosmos 模型进行后练习 ,开发者能够生成与现有物理环境与车辆轨道高度匹配的视频,还能从单视角视频(如行车记录仪片段)生成多视角视频。这种将广泛可用的行车记录仪数据转化为多摄像头数据的才能 ,为开发者供给了全新的辅佐驾驭练习数据库。这些多视角视频数据还可用于替换因传感器损坏或遮挡而缺失的实在摄像头数据。
经后练习的 Cosmos 模型会生成多视角视频数据,然后大幅增强辅佐驾驭练习数据集 。
NVIDIA Research 团队根据 20,000 小时的实在国际驾驭数据对 Cosmos 模型进行了后练习 。运用辅佐驾驭专用模型生成多视角视频数据,该团队提高了模型在雾天和雨天等杂乱环境下的功能 。
轿车职业生态体系 。
运用 Cosmos Predict 推进技能进步。
多家轿车制造商现已将 Cosmos Predict 集成到其体系中 ,以扩展并加快车辆开发的规划和速度。
辅佐驾驭货车范畴的领军企业 Plus 正在运用NVIDIA DRIVE AGX渠道构建其解决方案,该企业正在经过货车运送数据对 Cosmos Predict 进行后练习 ,以生成高度传神的组成驾驭场景