九儿 巨乳 英伟达推Cosmos宇宙基础模子,为加快物理AI造利器


发布日期:2025-03-20 19:30    点击次数:147

九儿 巨乳 英伟达推Cosmos宇宙基础模子,为加快物理AI造利器

作家 | ZeR0剪辑 | 漠影九儿 巨乳

智东西3月19日报说念,英伟达当天文书推出全新NVIDIA Cosmos宇宙基础模子(WFM)的首要更新,该模子引入了绽放式、可透澈定制的物理AI建立推理模子,可竣事物理AI的预测、可控宇宙生成和推理,让建立者往常所未有的款式限度宇宙生成。

1X、Agility Robotics、Figure AI、Foretellix、Skild AI、Uber是首批接纳Cosmos的企业,可更快、更大鸿沟地为物理AI生成更丰富的考试数据。

英伟达独创东说念主兼CEO黄仁勋以为,Cosmos宇宙基础模子是物理AI的一项首要冲突,为物理AI带来了一个绽放式、可透澈定制的推理模子,给机器东说念主和物理工业领域的冲突性发展带来了机遇。

同期,NVIDIA Omniverse物理AI操作系统正延迟至更多行业和伙伴。

Accenture、Ansys、Cadence、Databricks、Dematic、Hexagon、Omron、SAP、Schneider Electric With ETAP、西门子将Omniverse与极度的软件器具勾搭。

Foxconn、通用汽车、当代汽车集团、凯傲集团、梅赛德斯-奔突、Pegatron、Schaeffler齐在接纳Omniverse进行工业AI转型。

英伟达还推出了两款由NVIDIA Omniverse和Cosmos平台提供解救的新蓝图,为建立者提供用于机器东说念主和自动驾驶汽车后考试的大鸿沟可控合成数据生成引擎。

四款全新蓝图正在助力机器东说念主工场和大鸿沟合成数据生成。

一、发布三款Cosmos宇宙基础模子,加快物理AI的数据治理和后考试

新发布的Cosmos宇宙基础模子有三款:Cosmos Transfer,用于合成数据生成;Cosmos Predict,用于智能宇宙生成;Cosmos Reason,用于物理AI的多模态推理。

Cosmos Transfer或者摄取结构化视频输入,如分割图、深度图、激光雷达扫描、姿态臆测图和轨迹图等,以生成可控、传神的视频输出。

该模子可简化感知AI考试,将Omniverse中创建的3D仿真或真值调和为传神视频,用于大鸿沟可控合成数据生成。

Agility Robotics将是最早接纳Cosmos Transfer和Omniverse进行大鸿沟合成数据生成,用以考试其机器东说念主模子的公司之一。Agility Robotics首席期间官Pras Velagapudi以为,Cosmos为其提供了一个在真确宇宙可相聚的数据除外,延迟传神考试数据的契机。

用于自动驾驶汽车仿真是NVIDIA Omniverse蓝图借助Cosmos Transfer放大基于物理传感器数据的变化。借助该蓝图,Foretellix不错通过为不同驾驶数据集窜改天气和光照等要求来丰富行径场景。Parallel Domain也正在使用该蓝图将近似的变更应用于他们的传感器仿真。

用于合成操作领悟生成的NVIDIA GR00T蓝图结合了Omniverse和Cosmos Transfer,可大鸿沟生成万般化数据集,诈欺OpenUSD驱动的仿真,将数据相聚和增强时分从数天裁减到数小时。

此前在本年1月CES上文书的Cosmos Predict宇宙基础模子,或者通过文本、图像和视频等多模态输入生成编造宇宙情景。

新的Cosmos Predict模子将解救多帧生成,在给定运行和收尾输入图像的情况下,预测中间行径或领悟轨迹。这些模子专为后考试而打造,可使用英伟达绽放的物理AI数据集进行定制。

借助英伟达Grace Blackwell NVL72系统偏激强大的英伟达NVLink域的推理研讨智商,建立者不错竣事及时宇宙生成。

1X正在使用Cosmos Predict和Cosmos Transfer来考试其新式东说念主形机器东说念主NEO Gamma。机器东说念主大脑建立商Skild AI正在诈欺Cosmos Transfer增强其机器东说念主的合成数据集。 Nexar和Oxa正在使用Cosmos Predict来升级其自动驾驶系统。

Cosmos Reason是一个绽放式、可透澈定制的宇宙基础模子,具巧合空感知智商,它使用念念维链推理来联合视频数据,并或者预测交互放手,如一个东说念主走进东说念主行说念或一个盒子从架子上掉下来。

建立者不错使用Cosmos Reason来擢升物理AI数据标注和治理,增强现存宇宙基础模子或创建新的视觉谈话看成模子。 他们还不错对其进行后考试,构建高等策动器,以带领物理AI若何完成所需操作。

Cosmos宇宙基础模子可在英伟达API目次中预览,现已列入谷歌云上的Vertex AI Model Garden 中。 Cosmos Predict和Cosmos Transfer在Hugging Face和GitHub上公开提供。Cosmos Reason绽放抢先体验。

基于其下流任务,建立者不错在NVIDIA DGX Cloud上使用原生PyTorch剧本或NVIDIA NeMo框架对Cosmos宇宙基础模子进行后考试。

Cosmos建立者还不错使用DGX Cloud上的NVIDIA NeMo Curator来加快数据处理和治理。

Linker Vision 和 Milestone Systems正将其用于治理海量视频数据,考试用于视觉智能体的大视觉谈话模子,这些智能体基于英伟达AI蓝图进行视频搜索和转头。Virtual Incision正在探索将其部署在将来的手术机器东说念主中,而Uber和Waabi正在推动自动驾驶汽车的建立。

把柄英伟达着实AI原则,英伟达在扫数Cosmos宇宙基础模子中齐接纳绽放式护栏。 此外,英伟达正与谷歌DeepMind归并,将SynthID集成到水印中,匡助识别Cosmos宇宙基础模子NVIDIA NIM微就业的AI生成放手。

二、Omniverse延迟至更多企业,推动工业AI转型

数字化关于安身于物理宇宙的行业来说具有挑战性。来自传统系统的海量数字和物理宇宙数据酿成了多个孤岛。NVIDIA Omniverse是一个基于OpenUSD构建的操作系统,可匡助建立者和解物理宇宙的数据和应用。

英伟达当天文书Ansys、Databricks、Dematic、Omron、SAP、Schneider Electric with ETAP、西门子等极度的工业软件和就业提供商正在将NVIDIA Omniverse平台集成到他们的治理决策中,诈欺物理AI加快工业数字化。

英伟达Omniverse和仿真期间副总裁Rev Lebaredian谈说念,Omniverse是一个将寰球物理数据与物理AI领域勾搭起来的操作系统,借助Omniverse,寰球工业软件、数据和专科就业指点者正在往常所未有的速率和解工业生态系统并构建新应用,助力各行业高速推动新一代AI发展。

Ansys、Cadence、Hexagon、Omron、Rockwell Automation、西门子正在将Omniverse数据互操作性和可视化期间集成到其极度的工业软件、仿真和自动化治理决策中,以加快居品建立和优化制造进程。

物理AI方面,Alphabet旗下公司Intrinsic正在使用Flowstate助力Omniverse责任流和英伟达机器东说念主基础模子从数字孪生过渡到硬件部署。Databricks正在将NVIDIA Omniverse与Databricks数据智能平台集成,这将竣事物理AI的大鸿沟合成数据生成。

好意思国大型汽车制造商通用汽车文书接纳Omniverse来增强其工场和培训平台,以用于材料处理、运输和精密焊合等运营。在制造人命周期的另一端,联合利中文书接纳Omniverse和物理精准的数字孪生来简化和优化其居品的营销本体创作。

为了简化基于OpenUSD的应用的建立、部署和横向延迟,NVIDIA Omniverse现已在AWS Marketplace上的配备NVIDIA GPU的EC2 G6e实例中提供。微软Azure Marketplace现已在 NVIDIA A10 GPU上提供预建树的Omniverse实例和Omniverse Kit App Streaming,使建立者或者松驰建立和流式传输自界说Omniverse应用。

这些基于云的英伟达Omniverse建立者器具和就业展望将在本年晚些时候发布,这些器具将在配备英伟达GPU的Oracle云基础设施研讨裸机实例上提供,以及谷歌云上新发布的NVIDIA RTX PRO Blackwell就业器版。

在GTC上,英伟达与Destney Research和Intrinsic沿途推出了用于机器东说念主的OpenUSD金钱结构责任流。这种新结构和数据责任流使用OpenUSD里面的优秀实践来和解机器东说念主责任流,为所特等据源提供通用谈话。

三、四款全新蓝图,助力机器东说念主设施和大鸿沟合成数据生成

与Cosmos宇宙基础模子相勾搭的新NVIDIA Omniverse蓝图现已推出,可竣事用于物理AI建立的机器东说念主就绪设施和大鸿沟合成数据生成。

4款全新蓝图助力机器东说念主设施和大鸿沟合成数据生成。

Mega是一个用于在工业数字孪生中大鸿沟测试多机器东说念主机群的Omniverse蓝图,现已在 build.nvidia.com上发布预览版。

还有一款由NVIDIA Metropolis平台提供解救的用于视频搜索和转头的NVIDIA AI蓝图,或者构建可监控扫数这个词设施行动的AI智能体。

制造业指点者正在使用这些蓝图,通过物理AI优化其工业运营。

在汽车制造领域,Schaeffler和Accenture运行接纳Mega来测试和模拟用于材料处理自动化的 Agility Robotics Digit车队。

当代汽车集团正使用该蓝图在装配线上模拟波士顿能源Atlas机器东说念主,梅赛德斯-奔突正使用它来模拟Apptronik的Apollo东说念主形机器东说念主,以优化车辆装配操作。

在电子制造业领域,Pegatron正在使用Mega建立基于物理AI的NVIDIA Metropolis视频分析智能体,以改善工场运营和工东说念主安全性。富士康正在使用该蓝图,在其制造设施中对工业机械手、东说念主形机器东说念主和移动机器东说念主进行模拟,以解救NVIDIA Blackwell平台。

Foxconn中枢子公司Fii首席实施官Brand Cheng说:“借助NVIDIA Omniverse和Mega,咱们正在测试和考试东说念主形机器东说念主,以便在咱们的极度工场中运行,过问下一波物理AI高涨。”

在仓库和供应链治理决策方面,凯傲集团、Dematic和Accenture文书将集成Mega以推动新一代AI赋能自动化发展。idealworks正在将Mega集成到其车队治理软件中,以模拟、测试和优化机器东说念主机群。SAP客户和团搭伙伴不错使用Omniverse为仓库治理场景建立我方的编造环境。

借助面向AI工场数字孪生的新Omniverse蓝图,数据中心工程师可联想和模拟AI工场布局、冷却和电气,从而最大铁心地提高诈欺率和后果。

萝莉 崩坏:星穹铁道

Cadence Reality数字孪生平台和Schneider Electric with ETAP是起始将其仿真软件与蓝图集成的公司,而Vertiv和Schneider Electric正在为其电力和冷却装配提供Omniverse SimReady 3D模子,以加快AI工场数字孪生的建立。

用于合成操作领悟生成的VIDIA Isaac GR00T蓝图现已面向机器东说念主建立者绽放,可竣事 Omniverse和Cosmos的大鸿沟合成数据生成。 该蓝图可匡助东说念主类建立者将数据相聚时分从数小时裁减到数分钟,从而快速鼓舞机器东说念主建立。

结语:迈向物理AI之门

在GTC主题演讲中,黄仁勋谈到自2012年AlexNet神经网罗问世以来的四次AI海浪,从感知AI、生成式AI、代理型AI(AI智能体)走向物理AI。

从宇宙基础模子到Omniverse平台,齐是英伟达为援助模拟推行宇宙的物理特色和优化编造宇宙考试建立所铸造的利器。这些抑止丰富和优化的模子和软件器具九儿 巨乳,正使更多机器东说念主、自动驾驶、工业AI建立者从中受益。