
今天,该公司在多个垂直市场领域推出了新模型,并公布了一系列与AI实验室和开发者的合作伙伴关系,以共同构建开放基础模型。
这些举措在英伟达于圣何塞举行的全球技术大会上宣布,反映了该公司日益努力将开放模型定位为AI经济的核心层。尽管开放模型仅占所有模型使用量的约20%,但其生产成本平均低87%。根据麻省理工学院的研究人员。
公告的核心是英伟达Nemotron模型家族的扩展,这些模型支持新一代AI代理,能够执行复杂任务,而不仅仅是回答问题。
新的Nemotron 3系列包括多模态模型,整合了语言、视觉和语音能力。英伟达表示,这些模型旨在支持自然对话、复杂推理以及从多种数据形式中提取见解的能力。
新产品中包括Nemotron 3 Ultra,英伟达称其在使用为其Blackwell平台开发的NVFP4浮点格式时,实现了前沿级别的性能,同时提高了五倍的吞吐效率。该模型旨在用于AI原生应用,如编码助手、企业搜索和自动化工作流程。
“它完全在NVFP4中进行了预训练,是最智能的,并且具有当前最佳开放基础模型两倍的最大吞吐量,”英伟达生成式AI软件高级副总裁Kari Briski说。
其他模型包括Nemotron 3 Omni,它结合了音频、视觉和语言理解,使AI系统能够同时解释文档和视频,以及Nemotron 3 VoiceChat,用于实时对话交互,将语音识别、语言模型处理和文本转语音功能整合到一个系统中。
为了提高可靠性,英伟达还推出了Nemotron安全模型和一个代理检索管道,旨在检测不安全内容并提高多模态环境中的响应准确性。
英伟达表示,越来越多的企业软件公司已经在采用这些模型。Automation Anywhere Inc.、CodeRabbit Inc.、CrowdStrike Inc.、AnySphere Inc.、Distyl AI Inc.、The San Francisco AI Factory Inc.、Genspark Inc.、Perplexity AI Inc.和ServiceNow Inc.正在部署Nemotron模型以推动AI驱动的应用。LangChain Inc.也已将这些模型集成到其代理开发框架中。
英伟达还将其开放模型战略扩展到机器人和自主系统领域,推出了三项新产品。Cosmos 3是一个基础模型,旨在模拟复杂环境并支持机器人和自主机器的物理推理。
Isaac GR00T N1.7是一个用于人形机器人的视觉-语言-动作模型。Alpamayo 1.5提高了自动驾驶车辆的推理和导航能力。英伟达表示,包括HCL Technologies Ltd.、Johnson & Johnson MedTech、Milestone Systems A/S和丰田研究院在内的组织已经在使用Cosmos,而LG Electronics Inc.、Neur Robotics GmbH和Noble Machines Inc.正在采用GR00T以扩大人形机器人部署。
在医疗保健和生命科学领域,BioNeMo平台提供了用于建模生物系统的AI工具。一个名为Proteina-Complexa的新生成模型旨在通过生成可以附着于目标分子的蛋白质结合体来加速药物发现。
英伟达还与谷歌DeepMind、欧洲分子生物学实验室的欧洲生物信息学研究所和首尔国立大学合作,扩展了AlphaFold蛋白质结构数据库,增加了数千万个预测的蛋白质复合结构。
公司表示,额外的数据预计将帮助研究人员识别新的药物靶点并更好地理解疾病生物学。
在相关举措中,英伟达宣布了Nemotron联盟,这是一个通过共享专业知识、数据集和计算基础设施来推进开放前沿模型的合作伙伴关系。
“构建前沿模型需要大量的时间、专业知识和计算,这是大多数组织无法单独进行的重大投资,”Briski说。“这就是我们启动Nemotron联盟的原因。”
初始成员包括Black Forest Labs Inc、AnySphere、LangChain、Mistral AI SAS、Perplexity、Reflection AI Inc.、Axonwise Private Ltd.和Thinking Machines Lab。
联盟的第一个项目将是由英伟达和Mistral AI共同开发的新开放基础模型,并在英伟达的DGX云基础设施上进行训练。预计将发布到开放生态系统,并将作为即将推出的Nemotron 4模型家族的基础。
