文｜MetaPost
北京时间3 月 19 日凌晨，NVIDIA 英伟达一年一度的科技“春晚”如期而至，NVIDIA 英伟达在2024 GTC 上隆重发布 Project GR00T 人形机器人基础模型和Omniverse Cloud API，同时宣布全球众多知名汽车品牌已使用NVIDIA DRIVE Thor集中式车载计算平台，用于为各自下一代车型的自动驾驶功能提供助力。
众所周知，科技圈最火的技术和产品，都绕不开NVIDIA 英伟达。
一、 Project GR00T 人形机器人基础模型
NVIDIA 于今日发布人形机器人通用基础模型 Project GR00T，旨在进一步推动其在机器人和具身智能方面的突破。Project GR00T 是一种多模态人形机器人通用基础模型，作为机器人的大脑，让机器人学习技能从而执行各种指令。
NVIDIA 创始人兼首席执行官黄仁勋表示：“开发通用人形机器人基础模型是当今 AI 领域中最令人兴奋的课题之一。世界各地的机器人技术领导者正在汇集各种赋能技术，致力于在人工通用机器人领域实现突破。”
此外，NVIDIA 还发布了一款基于 NVIDIA Thor 系统级芯片的新型人形机器人计算机 Jetson Thor，并对 NVIDIA Isaac机器人平台进行了重大升级，包括生成式 AI 基础模型和仿真工具，以及 AI 工作流基础设施。
GR00T 驱动的机器人将能够理解自然语言，并通过观察人类行为来模仿动作——快速学习协调、灵活性和其他技能，以便适应现实世界并与之互动。黄仁勋还在现场展示了数台人形机器人，并与它们进行了互动。
专为人形机器人而生
Jetson Thor 是一个全新的计算平台，能够执行复杂的任务并安全、自然地与人和机器交互，具有针对性能、功耗和尺寸优化的模块化架构。
该平台带有 transformer engine 的下一代 GPU，采用 NVIDIA Blackwell 架构，可提供每秒 800 万亿次8位浮点运算 AI 性能，以运行 GR00T 等多模态生成式 AI 模型。凭借集成的功能安全处理器、高性能 CPU 集群和 100GB 以太网带宽，大大简化了设计和集成工作。
Isaac 平台的重大更新
GR00T 使用的 Isaac 工具可以为任何环境中的机器人创建新的基础模型。这些工具包括用于强化学习的 Isaac Lab 和用于计算编排服务的 OSMO。
训练具身智能模型需要海量的真实数据和合成数据。新的 Isaac Lab 是一个 GPU 加速、性能优化的轻量级应用，基于 Isaac Sim 构建，专门用于运行数千个用于机器人学习的并行仿真。
为了扩展异构计算的机器人开发工作负载，OSMO 在分布式环境中协调数据生成、模型训练和软硬件在环工作流。
NVIDIA 还发布了 Isaac Manipulator 和 Isaac Perceptor 等一系列机器人预训练模型、库和参考硬件。
Isaac Manipulator 为机械臂提供了卓越的灵活性和模块化 AI 功能，并提供了一系列强大的基础模型和 GPU 加速库。它提供了高达 80 倍的路径规划加速，零样本感知提高了效率和吞吐量，使开发者能够实现更多新的机器人任务的自动化。
Isaac Perceptor 提供了多摄像头和 3D 环绕视觉功能，这些功能正越来越多地被制造业和物流业的自主移动机器人所采用，以提高效率和更好地保护工人，同时降低错误率和成本。
二、NVIDIA DRIVE 为自动驾驶进一步助力
NVIDIA今日还宣布NVIDIA DRIVE Thor 集中式车载计算平台，已经被比亚迪、昊铂、小鹏、Plus、Nuro、Waabi 和文远知行等品牌采用。
作为DRIVE Orin 的后续产品，性能高达1000 TFLOPS的DRIVE Thor 是专为汽车行业的生成式AI应用而打造的车载计算平台。DRIVE Thor不仅可以提供丰富的座舱功能、安全可靠的高度自动化驾驶和无人驾驶功能，还能将所有功能整合至同一个集中式平台上。
NVIDIA创始人兼首席执行官黄仁勋表示，这款新一代自动驾驶汽车处理器将搭载专为Transformer、大语言模型和生成式AI工作负载而打造的全新NVIDIA Blackwell 架构。
NVIDIA汽车事业部副总裁吴新宙表示：“加速计算为生成式AI等领域带来了变革性突破，而生成式AI则正在重新定义自动驾驶和全球交通运输业。DRIVE Orin仍然是当今智能车型首选的AI车载计算平台，同时，我们看到移动出行领域的领先企业富有远见地将NVIDIA DRIVE Thor纳入其下一代AI汽车产品路线图中。”
1、加速计算打造下一代AI车型
NVIDIA DRIVE Thor被NVIDIA称为“将彻底改变汽车行业的格局，开创生成式AI定义驾驶体验的时代”的产品。多家头部电动汽车制造商在GTC上公布了其搭载DRIVE Thor的下一代AI车型。
比亚迪与NVIDIA的长期协作正从车端延伸到云端。除了在 DRIVE Thor上构建下一代车型外，比亚迪还计划将NVIDIA的AI基础设施用于云端AI开发和训练技术，并使用NVIDIA Isaac与NVIDIA Omniverse来开发用于虚拟工厂规划和零售配置器的工具与应用。
广汽埃安宣布旗下品牌昊铂下一代电动汽车将采用DRIVE Thor平台，新车型将于 2025 年开始量产，可实现L4级自动驾驶。昊铂目前的旗舰车型昊铂GT搭载了NVIDIA DRIVE Orin，该车型具备 L2+级高速自动驾驶能力。
小鹏宣布将把NVIDIA DRIVE Thor平台作为其下一代电动汽车的“AI大脑”，助力其智能辅助驾驶系统，实现自动驾驶和泊车、驾乘人员监控等功能。
此前，理想汽车和极氪均已表示将在DRIVE Thor上构建未来车型。
2、赋能全景智能交通运输需求
除乘用车外，DRIVE Thor还能够满足卡车、自动驾驶出租车、配送车等其他细分领域的不同需求。
Nuro致力于开发用于商用车和乘用车的L4级自动驾驶技术。该公司选择DRIVE Thor为Nuro Driver提供助力，Nuro Driver是一个集成式自动驾驶系统，由Nuro自研的AI-First软件和传感器以及NVIDIA车规级计算和网络硬件组成。该系统将于今年晚些时候开始测试。
全球自动驾驶软件解决方案提供商Plus宣布，其L4级解决方案SuperDrive的下一代产品将在符合安全标准的DRIVE Thor车规级集中式计算平台上运行。Plus的自动驾驶系统将充分利用DRIVE Thor 的计算性能，以了解卡车周围的环境并做出安全的驾驶决策。
正在打造自动驾驶AI的Waabi将利用DRIVE Thor推出其首个采用生成式AI技术的自动驾驶卡车解决方案。该公司计划将 DRIVE Thor 集成到其 Waabi Driver 中，大规模地提升自动驾驶卡车的安全与可靠性。
文远知行正在与联想车计算一同基于 DRIVE Thor 来创建多个商用L4级自动驾驶解决方案。该解决方案集成在联想首款自动驾驶域控制器 AD1 中，将被用于各种以城市为中心的用例，具备功能安全、冗余安全设计、融合可扩展等技术特点。
三、全新Omniverse Cloud API发布
2019年，NVIDIA Omniverse上线，2022年，Omniverse Cloud发布，如今，Omniverse已被全球各大行业广泛应用，任何人在任何地点都可以使用Omniverse Cloud这一综合、全面的云服务来设计、发布、运行和体验元宇宙相关应用。
NVIDIA创始人兼首席执行官黄仁勋表示：“所有制造出来的产品都将拥有数字孪生。Omniverse是一个可以构建并操作物理真实的数字孪生的操作系统。Omniverse和生成式AI都是将价值高达50万亿美元的重工业市场进行数字化所需的基础技术。”
2024 GTC，五款全新Omniverse Cloud API发布，既可以单独使用，也可以组合使用：
- USD Render：生成OpenUSD数据的全光线追踪RTX渲染；
- USD Write：用户可以修改OpenUSD数据并与之交互；
- USD Query：支持场景查询和交互式场景；
- USD Notify：追踪USD变化并提供更新信息；
- Omniverse Channel：连接用户、工具和世界，实现跨场景协作；
借助Omniverse Cloud API，开发者们可以轻松地将Omniverse的核心技术直接集成到现有的数字孪生设计与自动化软件应用中，以及用于测试和验证机器人或自动驾驶汽车等自主机器的仿真工作流中。
截至目前， Ansys、Cadence、达索系统旗下3DEXCITE、Hexagon、微软、罗克韦尔自动化、西门子和Trimble等全球大型工业软件制造商都在将Omniverse Cloud API加入到其软件组合中。
1、互式可视化和协作走近工业应用
早在2022年，NVIDIA便宣布进一步拓展和西门子的合作伙伴关系，将西门子的Xcelerator和NVIDIA的Omniverse平台连接起来，共同打造工业元宇宙。西门子是工业自动化软件基础设施、建筑技术和交通领域的领先者，结合NVIDIA在加速图形和人工智能领域的成果，将为用户带来生产和产品全生命周期的效率、生产力以及流程等优化提升。
如今，西门子正在其Xcelerator平台中使用Omniverse Cloud API，最先接入的是云端产品生命周期管理软件Teamcenter X。
黄仁勋今日在GTC主题演讲中展示了Teamcenter X与Omniverse API的连接，它不仅可以打通设计数据到NVIDIA生成式AI API之间的通路，还允许在该应用内直接使用Omniverse RTX渲染。
西门子总裁兼首席执行官Roland Busch表示：“通过NVIDIA Omniverse API，西门子能够利用生成式AI赋能客户，使其符合物理学的数字孪生变得更具沉浸感。这将帮助所有人在实际建造前，对下一代产品、制造流程和工厂进行虚拟设计、建造和测试。通过将现实世界与数字世界相结合，西门子数字孪生技术正在帮助全球企业提高竞争力、弹性和可持续发展能力。”
2、加速自主机器开发
随着全球对机器人、自动驾驶汽车和AI监控系统需求的增加，传感器数据对于训练、测试和验证从感知到规划和控制的全栈自主性便显得至关重要。
Omniverse Cloud API恰恰能够连接丰富的模拟工具、开发者生态系统和业界领先的传感器解决方案提供商，通过高保真以及符合物理学的传感器仿真实现全栈训练和测试工作。
据悉，今年晚些时候，Microsoft Azure也将上线 Omniverse Cloud API 服务。
微软Emerging Technologies公司副总裁Andy Pratt表示：“下一个工业数字化时代已经到来。通过Microsoft Azure上的NVIDIA Omniverse API，世界各地各行业的企业都可以连接、协作并改进其现有工具，创造出下一批AI赋能的数字孪生工具。”
评论