|
黃仁勛發(fā)布多項新技術(shù)，有望改變萬(wàn)億美元的產(chǎn)業(yè) 本周二，NVIDIA創(chuàng )始人兼首席執行官黃仁勛介紹了NVIDIA的多項新技術(shù)，這些技術(shù)有望為萬(wàn)億美元的產(chǎn)業(yè)帶來(lái)改變。NVIDIA的多項新技術(shù)可助力各領(lǐng)域實(shí)現現實(shí)和虛擬世界模擬，包括自動(dòng)駕駛、虛擬形象、機器人、以及地球氣候建模等領(lǐng)域。 黃仁勛在本周二的GTC線(xiàn)上大會(huì )發(fā)表了主題演講，帶來(lái)了NVIDIA Omniverse Avatar和NVIDIA Omniverse Replicator等多項最新發(fā)布和演示，并展示了用于3D工作流程的虛擬世界模擬和協(xié)作平臺 —— NVIDIA Omniverse，以及Omniverse是如何將NVIDIA的各項技術(shù)相結合。 他分享了使用Omniverse Avatar平臺的多個(gè)使用案例，包括用于客戶(hù)支持的Project Tokkio和用于視頻會(huì )議的Project Maxine。 
NVIDIA 首席執行官黃仁勛展示了Project Maxine如何利用Omniverse Avatar平臺將計算機視覺(jué)、Riva語(yǔ)音AI以及虛擬形象動(dòng)畫(huà)和圖形連接到一個(gè)實(shí)時(shí)對話(huà)的AI機器人——“Toy Jensen Omniverse Avatar”上 黃仁勛表示：“如何使用Omniverse模擬倉庫、工廠(chǎng)、物理和生物系統、5G邊緣、機器人、自動(dòng)駕駛汽車(chē)，甚至是虛擬形象的數字孿生，是一個(gè)永恒的主題�！� 在主題演講的最后，他宣布NVIDIA將建立一個(gè)數字孿生來(lái)模擬和預測氣候變化。該數字孿生名為Earth Two，簡(jiǎn)稱(chēng)E-2。 全棧數據中心級開(kāi)放式平臺 黃仁勛表示，加速計算推動(dòng)了現代AI的發(fā)展，它掀起的浪潮正在涌向科學(xué)界和全球各行各業(yè)。而這一切都基于3類(lèi)芯片 —— GPU、CPU、DPU，以及從云端到邊緣部署廣泛的多種系統 —— DGX、HGX、EGX、RTX和AGX系統。 從圖形、AI、數據科學(xué)到機器人，NVIDIA已經(jīng)為300萬(wàn)名開(kāi)發(fā)者創(chuàng )建了150個(gè)加速庫。 在GTC上，NVIDIA還發(fā)布了65個(gè)全新以及更新的SDK。 黃仁勛表示：“NVIDIA加速計算是一個(gè)全棧數據中心級開(kāi)放式平臺�！� 在介紹NVIDIA Quantum-2時(shí)，黃仁勛將其稱(chēng)為“到目前為止最先進(jìn)的網(wǎng)絡(luò )平臺”，并且隨著(zhù)BlueField-3 DPU的發(fā)布，全球將迎來(lái)云原生超級計算�！癚uantum-2 所提供的超高性能、廣泛的可訪(fǎng)問(wèn)性、以及高安全性，正是云計算供應商和超級計算中心所需要的。 網(wǎng)絡(luò )安全是企業(yè)和國家的首要問(wèn)題，黃仁勛發(fā)布了依托于三大支柱的零信任框架，以應對這一挑戰。 BlueField DPU將應用程序與基礎架構隔離。最新BlueField SDK——NVIDIA DOCA 1.2實(shí)現了新一代分布式防火墻。黃仁勛介紹道， NVIDIA Morpheus假設入侵者已進(jìn)入其內部，會(huì )利用“加速計算和深度學(xué)習的超強力量來(lái)檢測入侵者的活動(dòng)”。 Omniverse Avatar和Omniverse Replicator 黃仁勛表示，有了Omniverse，“我們就有了創(chuàng )建全新3D世界，或對物理世界進(jìn)行建模的技術(shù)�！� NVIDIA還發(fā)布了Omniverse Avatar，致力于助力開(kāi)發(fā)者使用Omniverse創(chuàng )建交互式角色，并使此角色具備視覺(jué)和語(yǔ)言能力，能夠就各類(lèi)主題進(jìn)行交談，并理解自然語(yǔ)言中的深層含義。 黃仁勛展示了Project Maxine如何利用Omniverse Avatar平臺將計算機視覺(jué)、Riva語(yǔ)音AI以及虛擬形象動(dòng)畫(huà)和圖形連接到一個(gè)實(shí)時(shí)對話(huà)的AI機器人——“Toy Jensen Omniverse Avatar”上。 他還演示了Project Tokkio，這是一個(gè)位于自助式餐廳服務(wù)亭中的虛擬服務(wù)員，其可看到兩名顧客，與之交談并理解他們的對話(huà)。 黃仁勛還展示了Project Maxine為虛擬協(xié)作和內容創(chuàng )建應用添加先進(jìn)視頻和音頻功能的能力。 一項演示中，一位女士在嘈雜的咖啡廳中用英語(yǔ)進(jìn)行視頻通話(huà)，在去除背景噪音后可以清楚地聽(tīng)到她所說(shuō)的話(huà)。她的話(huà)被實(shí)時(shí)轉錄并翻譯成法語(yǔ)、德語(yǔ)和西班牙語(yǔ)，而且借助Omniverse，以上多門(mén)外語(yǔ)均出自虛擬形象之口，并且這位虛擬形象在對話(huà)時(shí)的聲音和語(yǔ)調與她本人完全相同。 為了幫助開(kāi)發(fā)者創(chuàng )建訓練AI所需的海量數據，NVIDIA發(fā)布了Omniverse Replicator——一款用于訓練深度神經(jīng)網(wǎng)絡(luò )的合成數據生成引擎。 NVIDIA開(kāi)發(fā)了兩款Replicator合成數據生成引擎：面向通用機器人、用于Isaac Sim的Omniverse Replicator，以及面向自動(dòng)駕駛汽車(chē)、用于DRIVE Sim的Omniverse Replicator。 自去年年底發(fā)布以來(lái)，Omniverse已被500家公司的設計師下載了7萬(wàn)次。 AI模型和系統 黃仁勛發(fā)布了用于訓練大型語(yǔ)言模型的Nemo Megatron。他表示，此模型 “將成為有史以來(lái)最大的主流HPC應用�！� 圖形作為現代數據科學(xué)中的一種關(guān)鍵數據結構，現在可以通過(guò)全新Python軟件包Deep Graph Library（DGL）投射到深度神經(jīng)網(wǎng)絡(luò )框架中。 今日發(fā)布的NVIDIA Modulus用于構建和訓練物理學(xué)機器學(xué)習模型，這些模型可以學(xué)習并充分遵守物理學(xué)法則。 Triton是一款適用于所有工作負載的推理服務(wù)器，其升級版現在可以推理森林模型，并執行大型語(yǔ)言模型的多GPU多節點(diǎn)推理。 黃仁勛共發(fā)布了三個(gè)新的庫： • ReOpt – 面向10萬(wàn)億美元的物流行業(yè) • cuQuantum – 致力于加速量子計算研究 • cuNumeric – 致力于為Python社區的科學(xué)家、數據科學(xué)家以及機器學(xué)習和AI研究者而加速NumPy。 黃仁勛還發(fā)布了NVIDIA Launchpad，以助力將基于NVIDIA AI技術(shù)的服務(wù)帶到邊緣。NVIDIA正在與數據中心巨頭Equinix合作，將NVIDIA AI預安裝并集成到全球的數據中心中。 機器人技術(shù) NVIDIA Isaac生態(tài)系統現已有700多家公司和合作伙伴，這個(gè)數字在過(guò)去4年里增長(cháng)了5倍。 黃仁勛宣布，NVIDIA Isaac機器人平臺現可輕松集成至機器人操作系統（ROS）中。這是一套應用廣泛的軟件庫和工具，適用于機器人應用。 黃仁勛解釋道，建立在Omniverse之上的Isaac Sim是有史以來(lái)最逼真的機器人模擬器。 “該模擬器的目標是讓機器人無(wú)法分清自己是在模擬環(huán)境中還是在現實(shí)世界中�！� 為此，Isaac Sim Replicator可生成用于訓練機器人的合成數據。 黃仁勛表示，Replicator可以模擬傳感器，生成自動(dòng)標記的數據，并通過(guò)一個(gè)域隨機化引擎，創(chuàng )建豐富、多樣化的訓練數據集。 自動(dòng)駕駛汽車(chē) 黃仁勛表示，所有移動(dòng)之物都將實(shí)現完全或近乎完全的自主化�！暗�2024年，絕大多數新電動(dòng)車(chē)都將具備真正的自動(dòng)駕駛功能�！� NVIDIA DRIVE是NVIDIA的自動(dòng)駕駛汽車(chē)全棧開(kāi)放式平臺，而Hyperion 8是NVIDIA最新的完整硬件和軟件架構。其傳感器套件包括12個(gè)攝像頭、9個(gè)雷達、12個(gè)超聲波和一個(gè)前置激光雷達，所有處理均通過(guò)兩個(gè)NVIDIA Orin 系統級芯片進(jìn)行。 黃仁勛詳細介紹了Hyperion內置的幾項新技術(shù)，包括用于DRIVE Sim的Omniverse Replicator。Omniverse Replicator是一個(gè)基于Omniverse的自動(dòng)駕駛汽車(chē)合成數據生成引擎。 NVIDIA目前正在運行Hyperion 8傳感器、4D感知、基于深度學(xué)習的多傳感器融合、特征追蹤和一個(gè)新的規劃引擎。 汽車(chē)內部也將被徹底改變。NVIDIA Maxine技術(shù)將重新定義我們與汽車(chē)的互動(dòng)方式。 “Maxine將把您的汽車(chē)變成一位管家�！� Earth Two 黃仁勛最后宣布，NVIDIA將構建Earth Two （E-2）來(lái)模擬和預測氣候變化�！盀榱藙�(chuàng )建Earth Two，我們將需要使用迄今為止發(fā)明的所有技術(shù)�！� 立即觀(guān)看主題演講重播，更多精彩，敬請訪(fǎng)問(wèn) GTC大會(huì )頁(yè)面。 |
