NVIDIA 發(fā)布全新開(kāi)放模型、數(shù)據(jù)和工具，推動(dòng)各行業(yè) AI 技術(shù)的發(fā)展

為擴(kuò)展開(kāi)放模型生態(tài)，NVIDIA 發(fā)布全新開(kāi)放模型、數(shù)據(jù)和工具，推動(dòng)各行業(yè) AI 技術(shù)的發(fā)展。

• NVIDIA Nemotron 賦予 AI 智能體語(yǔ)音、多模態(tài)智能和安全能力：基于近期發(fā)布的 NVIDIA Nemotron 3 系列開(kāi)放模型與數(shù)據(jù)，NVIDIA 推出 Nemotron 語(yǔ)音、多模態(tài)檢索增強(qiáng)生成 (RAG) 和安全模型。

1. Nemotron Speech包含全新自動(dòng)語(yǔ)音識(shí)別 (ASR) 模型等多個(gè)榜首級(jí)的開(kāi)放模型，可實(shí)現(xiàn)實(shí)時(shí)低延遲語(yǔ)音識(shí)別，適用于實(shí)時(shí)字幕和語(yǔ)音 AI 應(yīng)用。日常及模態(tài)基準(zhǔn)測(cè)試顯示，該模型性能較同類(lèi)模型提升 10 倍。
2. Nemotron RAG包含全新的嵌入與重排序視覺(jué)語(yǔ)言模型 (VLM)，能夠提供高精度的多語(yǔ)言和多模態(tài)數(shù)據(jù)洞察，提高文檔搜索與信息檢索能力。
3. Nemotron Safety模型可提升 AI 應(yīng)用的安全性與可信度，目前已包括支持?jǐn)U展語(yǔ)言的 Llama Nemotron 內(nèi)容安全模型，以及高精度檢測(cè)敏感數(shù)據(jù)的 Nemotron PII 模型。

• 適用于各類(lèi)物理 AI 與機(jī)器人的新模型：NVIDIA 推出 NVIDIA Cosmos 開(kāi)源世界基礎(chǔ)模型，通過(guò)類(lèi)人推理與世界生成能力加快物理 AI 的開(kāi)發(fā)與驗(yàn)證。

1. Cosmos Reason 2是一個(gè)全新的榜首級(jí)推理型 VLM，可幫助機(jī)器人與 AI 智能體在物理世界中實(shí)現(xiàn)更高精度的視覺(jué)感知、理解與交互。
2. Cosmos Transfer 2.5Cosmos Predict 2.5是兩個(gè)領(lǐng)先的模型，可在各種不同環(huán)境與條件下生成大規(guī)模合成視頻。

基于 Cosmos 平臺(tái)，NVIDIA 還推出了適用于各類(lèi)具身物理 AI 的開(kāi)源模型與藍(lán)圖：

1. Isaac GR00T N1.6是專(zhuān)為人形機(jī)器人打造的開(kāi)源推理視覺(jué)語(yǔ)言行動(dòng) (VLA) 模型，它能實(shí)現(xiàn)全身控制，并借助 NVIDIA Cosmos Reason 增強(qiáng)推理和上下文理解。
2. 用于視頻搜索和總結(jié)的 NVIDIA Blueprint作為 NVIDIA Metropolis 平臺(tái)的一部分，是一個(gè)適用于構(gòu)建視覺(jué) AI 智能體的參考工作流。這些 AI 智能體可通過(guò)分析海量錄制和實(shí)時(shí)視頻，從而提升運(yùn)營(yíng)效率并維護(hù)環(huán)境秩序。

• 適用于推理型輔助駕駛汽車(chē)的 NVIDIA Alpamayo：NVIDIA 推出全新 NVIDIA Alpamayo 系列開(kāi)放模型、仿真工具和大型數(shù)據(jù)集，將推動(dòng)推理型輔助駕駛汽車(chē)的開(kāi)發(fā)進(jìn)程。該系列包含：

1. Alpamayo 1是首個(gè)應(yīng)用于輔助駕駛汽車(chē)的大型開(kāi)放 VLA 推理模型，使汽車(chē)能夠理解周?chē)h(huán)境并解釋其決策背后的邏輯。
2. AlpaSim是一款開(kāi)源的仿真框架，支持在多樣化環(huán)境和極端事件中對(duì)推理型輔助駕駛模型進(jìn)行閉環(huán)訓(xùn)練與評(píng)估。

• 適用于醫(yī)療與生命科學(xué)的 NVIDIA Clara：為降低成本并加速治療方案的落地，NVIDIA 推出全新 Clara AI 模型，彌合數(shù)字藥物研發(fā)與現(xiàn)實(shí)醫(yī)療之間的差距。具體包括以下模型：

1. La-Proteina幫助設(shè)計(jì)大規(guī)模、原子級(jí)精確的蛋白質(zhì)，用于研究和候選藥物開(kāi)發(fā)，為科學(xué)家研究此前被視為無(wú)法治療的疾病提供了新工具。
2. ReaSyn v2通過(guò)將制造藍(lán)圖融入研發(fā)過(guò)程，確保 AI 設(shè)計(jì)的藥物能夠?qū)嶋H合成。
3. KERMT通過(guò)預(yù)測(cè)潛在藥物與人體的相互作用，在研發(fā)早期提供高精度、計(jì)算安全的測(cè)試。
4. RNAPro通過(guò)預(yù)測(cè) RNA 分子的復(fù)雜三維結(jié)構(gòu)，挖掘個(gè)性化醫(yī)療的潛力。

以上為摘要內(nèi)容，如需閱讀全文，請(qǐng)點(diǎn)擊鏈接：NVIDIA 發(fā)布全新開(kāi)放模型、數(shù)據(jù)和工具，推動(dòng)各行業(yè) AI 技術(shù)的發(fā)展 | NVIDIA 英偉達(dá)博客