NVIDIA 推出开源 Alpamayo 平台,实现智能驾驶并了解现实世界

自动驾驶进入“类人思考”阶段 英伟达发布开源Alpamayo平台版权声明:本文版权归网易汽车所有。转载时请注明出处。网易汽车1月6日报道,在今年的CES上,NVIDIA CEO黄仁勋宣布推出业界首个开源推理自动驾驶平台Alpamayo。它是全球首个能够自主思考、推理和驾驶的智能汽车人工智能系统。该系统采用端到端的训练模型,可实现从摄像头输入到执行器输出的全流程训练,标志着自动驾驶从“感知时代”向“推理时代”转变。黄仁勋强调,该平台旨在为汽车提供“类人推理能力”,并表示“物理AI的ChatGPT时代已经到来”,无人驾驶出租车将是最先受益的应用之一。 Alpamayo平台是业界首个全栈“模型+仿真+数据”开源专为自动驾驶而设计的解决方案。核心由三个主要组件组成。 Alpamayo 1模型:作为平台的“大脑核心”,它是一个拥有100亿个参数的多模态视觉-语言-动作(VLA)推理模型。与仅理解“读取数据并做出反应”的传统自动驾驶模型不同,它们可以像人类一样连接来自视觉传感器、语音命令和驾驶行为逻辑的信息。该模型现已在 Hugging Face 平台上完全开源。无论您是汽车公司的研发团队还是初创公司,都可以直接下载并调整。可以适应更优化的运行时间模型并在车辆侧面实施。它还可以用作驾驶员辅助基础设施来创建开发工具,例如基于推理的评估系统和自动注释系统。物理 AI 数据集:NVIDIA 为驾驶员辅助提供多样化、大规模的开放数据集。天塔sset 包含超过 1,700 小时的驾驶数据,涵盖广泛的地理区域和环境条件,并涵盖驱动推理架构开发所需的罕见、复杂和现实世界的极端场景。 AlpaSim仿真框架:基于微服务架构的开源仿真器,支持闭环测试和高保真场景还原,大幅降低车载测试成本。如今,Lucid、Jaguar Land Rover 和 Uber 等领先的移动公司,以及 Berkeley DeepDrive 等自动驾驶研究社区,计划利用 Alpamayo 加速其安全、基于推理的 L4 部署流程。 Alpamayo平台彻底改变行业的主要原因是它解决了长期困扰自动驾驶实施的四个核心问题。每种方法的优点都得到了实际应用场景的支持。与传统自动驾驶相比Alpamayo 1 模型的系统“看到红灯就停下来,看到障碍物就躲起来,看不到障碍物就很容易‘崩溃’”,它具有“思维链”功能,可以将复杂的问题分解为逐步决策。例如,如果路口红绿灯出现故障,摄像头会观察迎面车辆的行驶状况以及车辆周围行人的移动情况,结合地图信息来确定路口的优先级并估计最佳路线以生成路线。现在可以解释决策逻辑(例如“迎面驶来的车辆已减速让行,行人已撤离人行横道,我们可以缓慢通行”),彻底解决了行业长期存在的“黑匣子决策”问题。此外,该系统将开放所有模型、数据集和模拟工具。截至目前,捷豹路虎、Lucid已宣布接入该平台,Uber 计划用它来改造其自动驾驶车队。加州大学伯克利分校 DeepDrive 联盟主任表示:“凭借其开放的特权和强大的能力,我们将支持前所未有规模的培训,并加速自动驾驶技术的采用。这提供了更大的灵活性和资源保证。”当然,这套系统以成本革命为中端汽车带来了高端自动驾驶,同时消除了用户对安全性和冗余设计的担忧。据当地消息称,搭载该技术的首款量产车型将于今年第一季度在美国进行道路测试。该车集成了12个摄像头、5个毫米波雷达和高精度地图。在Alpamayo 1模型的支持下,它可以覆盖98%的已知驾驶场景,并针对剩余2%的极端情况保持持续学习能力。

admin

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注