AIHub 消息，昨天，NVIDIA GTC 大會(huì)如期而至。在大會(huì)上，英偉達(dá)創(chuàng)始人兼 CEO 黃仁勛介紹了 Omniverse（全宇宙）戰(zhàn)略的最新進(jìn)展，并發(fā)布了旨在生成逼真交互式 AI 數(shù)字化身的 Omniverse Avatars 平臺(tái)。

其實(shí)，英偉達(dá)在 2020 年 10 月就開(kāi)始測(cè)試面向企業(yè)的實(shí)時(shí)仿真模擬和協(xié)作平臺(tái) Omniverse，并在今年 4 月的 GTC 春季大會(huì)推出正式版本。

在當(dāng)時(shí)，媒體已經(jīng)紛紛將這個(gè)虛擬工作平臺(tái)稱為“工程師的元宇宙”，包括寶馬、愛(ài)立信、沃爾沃和 Adobe 等眾多公司都有采用 Omniverse。

黃仁勛曾將 Omniverse 描述成 “一款將 3D 世界連接至共享虛擬世界的平臺(tái)”，并宣稱它是未來(lái)數(shù)字孿生技術(shù)的基礎(chǔ)。

在昨晚的 GTC 秋季大會(huì)，黃仁勛進(jìn)一步擴(kuò)展了 Omniverse 概念，并正式推出 Omniverse Avatar 和 Ominiverse Replicator。

前者旨在幫助開(kāi)發(fā)者通過(guò)英偉達(dá)的 Omniverse 平臺(tái)創(chuàng)建可以理解真人自然說(shuō)話意圖的交互式虛擬角色，而后者則是一種用于訓(xùn)練深度神經(jīng)網(wǎng)絡(luò)的合成數(shù)據(jù)生成引擎，從而提供創(chuàng)建訓(xùn)練 AI 所需的大量數(shù)據(jù)。Ominiverse Replicator 主要面向通用機(jī)器人和自動(dòng)駕駛汽車(chē)。

另外，Omniverse 同時(shí)新增了英偉達(dá)早前發(fā)布的一系列 AR/VR 功能。

1. Omniverse Avatar

Omniverse Avatar 是 NVIDIA Omniverse 的一部分，這是一個(gè)用于 3D 工作流程的虛擬世界模擬和協(xié)作平臺(tái)，目前處于公開(kāi)測(cè)試階段，擁有超過(guò) 70,000 名用戶。

Omniverse Avatar 所使用的語(yǔ)音技術(shù)、計(jì)算機(jī)視覺(jué)、自然語(yǔ)言理解、推薦引擎、面部動(dòng)畫(huà)和圖像元素，通過(guò)以下技術(shù)實(shí)現(xiàn)：

• 語(yǔ)音識(shí)別：基于 NVIDIA Riva。這個(gè)軟件開(kāi)發(fā)工具包可以識(shí)別多種語(yǔ)言的語(yǔ)音。Riva 還可通過(guò)文本語(yǔ)音轉(zhuǎn)換功能生成接近真人的語(yǔ)音反饋。

• 自然語(yǔ)言理解：基于 Megatron 530B 大型語(yǔ)言模型。該模型可以識(shí)別、理解和生成人類(lèi)語(yǔ)言。Megatron 530B 是一個(gè)預(yù)訓(xùn)練模型，它可以在很少或沒(méi)有訓(xùn)練的情況下完成句子、回答主題廣泛的問(wèn)題、總結(jié)長(zhǎng)而復(fù)雜的故事、翻譯成其他語(yǔ)言，并應(yīng)對(duì)許多它未接受過(guò)專(zhuān)門(mén)訓(xùn)練的情景。

• 推薦引擎：由 NVIDIA Merlin 提供。該框架使企業(yè)可以建立能夠處理大量數(shù)據(jù)的深度學(xué)習(xí)推薦系統(tǒng)，以提出更明智的建議。

• 感知功能：來(lái)自用于視頻分析的計(jì)算機(jī)視覺(jué)框架——NVIDIA Metropolis。

• 虛擬形象動(dòng)畫(huà)：由 AI 賦能的 2D 和 3D 面部動(dòng)畫(huà)和渲染技術(shù)——NVIDIA Video2Face 和 Audio2Face 驅(qū)動(dòng)。

所述技術(shù)都集成在一個(gè)應(yīng)用，并使用英偉達(dá)統(tǒng)一計(jì)算框架進(jìn)行實(shí)時(shí)處理。在打包成可擴(kuò)展、自定義微服務(wù)后，它們將能夠通過(guò) NVIDIA Fleet Command 在多個(gè)地點(diǎn)安全地部署、管理和協(xié)調(diào)。

英偉達(dá)指出，Omniverse Avatar 為 AI 助手的創(chuàng)建開(kāi)辟了道路，而且可以根據(jù)各個(gè)行業(yè)的需求輕松定制。例如，AI 助手可以幫助處理數(shù)十億次日常客戶服務(wù)互動(dòng)，比如餐廳訂單，銀行交易，個(gè)人預(yù)約和預(yù)訂等，帶來(lái)更多商機(jī)并提升客戶滿意度。

黃仁勛表示：“智能虛擬助手的前景一片光明。Omniverse Avatar 將我們的基礎(chǔ)圖像、模擬和 AI 技術(shù)結(jié)合在一起，打造出一些有史以來(lái)最復(fù)雜的實(shí)時(shí)應(yīng)用。協(xié)作機(jī)器人和虛擬助手的案例令人難以置信，影響深遠(yuǎn)。”

在 NVIDIA GTC 的主題演講中，黃仁勛分享了Omniverse Avatar 的各種示例：

• 用于客戶支持的 Project Tokkio；

• 用于始終在線的車(chē)輛智能服務(wù)的 NVIDIA DRIVE Concierge；

• 用于視頻會(huì)議的 Project Maxine。

在 Project Tokkio 的第一個(gè)演示中，黃仁勛向同事展示了與一個(gè)被制作成他自己的玩具復(fù)制品的虛擬形象進(jìn)行實(shí)時(shí)對(duì)話——談?wù)撋飳W(xué)和氣候科學(xué)等話題。

黃仁勛自己的虛擬形象 toy-me

在第二個(gè) Project Tokkio 演示中，他突出顯示了餐廳售貨亭中的客戶服務(wù)化身，當(dāng)他們訂購(gòu)素食漢堡、薯?xiàng)l和飲料時(shí)，他能夠看到、交談并理解兩位顧客。演示由英偉達(dá)人工智能軟件和Megatron 530B 提供支持，Megatron 530B 目前是世界上最大的可定制語(yǔ)言模型。

在 DRIVE Concierge AI 平臺(tái)的演示中，儀表板中央屏幕上的數(shù)字助理幫助駕駛員選擇最佳駕駛模式以準(zhǔn)時(shí)到達(dá)目的地，然后按照他的要求設(shè)置汽車(chē)行駛里程低于 100 英里時(shí)的提醒。

另外，黃仁勛展示了 Project Maxine 將最先進(jìn)的視頻和音頻功能添加到虛擬協(xié)作和內(nèi)容創(chuàng)建應(yīng)用程序的能力。

在嘈雜的咖啡館中，視頻通話中顯示了一名講英語(yǔ)的人，但可以在沒(méi)有背景噪音的情況下清晰地聽(tīng)到。當(dāng)她說(shuō)話時(shí)，她的話會(huì)被實(shí)時(shí)轉(zhuǎn)錄并翻譯成德語(yǔ)、法語(yǔ)和西班牙語(yǔ)，并使用與她相同的聲音和語(yǔ)調(diào)。

Maxine使用計(jì)算機(jī)視覺(jué)來(lái)追蹤人的面部，并識(shí)別其表情，3D動(dòng)畫(huà)可為其制作虛擬而逼真的頭像。

可以想象，在企業(yè)和開(kāi)發(fā)人員中，每個(gè)行業(yè)都需要某種形式的虛擬化身。

使用Omniverse Avatar平臺(tái)，你可以為視頻會(huì)議和協(xié)作平臺(tái)、客戶支持平臺(tái)、內(nèi)容創(chuàng)建、應(yīng)用收益和數(shù)字孿生、機(jī)器人應(yīng)用等等構(gòu)建定制的AI助理。

NVIDIA的虛擬世界模擬Omniverse是打造虛擬世界的關(guān)鍵平臺(tái)。從機(jī)器人、自動(dòng)駕駛車(chē)隊(duì)、倉(cāng)庫(kù)、工業(yè)廠房到整個(gè)城市，都能在Omniverse數(shù)字孿生中完成創(chuàng)建、訓(xùn)練和運(yùn)行。

黃仁勛說(shuō)，Omniverse面向數(shù)據(jù)中心規(guī)模設(shè)計(jì)，有朝一日有望能達(dá)到全球數(shù)據(jù)規(guī)模。

愛(ài)立信正構(gòu)建整個(gè)城市的數(shù)字孿生環(huán)境，幫助確定如何放置和配置每個(gè)站點(diǎn)以獲得最佳覆蓋范圍和網(wǎng)絡(luò)性能，可對(duì)整個(gè)5G網(wǎng)絡(luò)執(zhí)行逼真遠(yuǎn)程仿真。

2. 通往虛擬世界的新門(mén)戶

英偉達(dá)指出，Omniverse 平臺(tái)將充當(dāng)物理級(jí)準(zhǔn)確的 3D 虛擬世界的結(jié)締組織，并將獲得 AR、VR 和多 GPU 渲染等新功能。

當(dāng)然，Omniverse 主要是新增英偉達(dá)早前發(fā)布過(guò)的一系列 AR/VR 功能，包括：

• NVIDIA CloudXR：這個(gè)企業(yè)級(jí)沉浸式串流框架已經(jīng)集成到 Omniverse Kit（用于構(gòu)建原生 Omniverse 應(yīng)用和微服務(wù)的工具包），允許用戶以交互方式將 Omniverse 體驗(yàn)串流至他們的移動(dòng) AR 和 VR 設(shè)備。

• Omniverse VR：領(lǐng)先的完全圖像、實(shí)時(shí)光線追蹤 VR，可支持開(kāi)發(fā)者在平臺(tái)上構(gòu)建自己的 VR 工具，而最終用戶可以直接享受 VR 功能。

• Omniverse Remote：提供 AR 功能和虛擬攝像頭，支持設(shè)計(jì)師查看通過(guò) iOS 和 Android 設(shè)備全光線追蹤的 asset。

乘著 AI、高性能計(jì)算和元宇宙的東風(fēng)，NVIDIA 今年過(guò)得可謂風(fēng)生水起，市值一路扶搖直上，突破 7700 億美元。其 Omniverse 平臺(tái)更是被分析機(jī)構(gòu)視作 NVIDIA 一項(xiàng)重要的平臺(tái)擴(kuò)張戰(zhàn)略。

在這表面風(fēng)光的背后，NVIDIA 的遠(yuǎn)見(jiàn)和前瞻性不容小覷。無(wú)論是如火如荼的 AI，還是方興未艾的虛擬世界，NVIDIA 能成為科技熱潮的直接受益者，都離不開(kāi)過(guò)去多年對(duì)其軟硬件產(chǎn)品的打磨。

此次 NVIDIA GTC 大會(huì)期間，我們還將看到更多覆蓋深度學(xué)習(xí)、數(shù)據(jù)科學(xué)、高性能計(jì)算、機(jī)器人等領(lǐng)域的最新進(jìn)展，而始于 NVIDIA CUDA 的加速計(jì)算正在這些領(lǐng)域催化效率提升，推動(dòng)現(xiàn)代科技快速進(jìn)化、走向未來(lái)。

參考鏈接：

1. https://nvidianews.nvidia.com/news/nvidia-announces-platform-for-creating-ai-avatars

2. https://www.youtube.com/watch?v=jhDiaUL_RaM&t=787s

關(guān)于 NVIDIA

NVIDIA 于 1999 年發(fā)明的 GPU 引發(fā)了 PC 游戲市場(chǎng)的增長(zhǎng)，并重新定義了現(xiàn)代計(jì)算機(jī)圖形、高性能計(jì)算和人工智能。該公司在加速計(jì)算和人工智能方面的開(kāi)創(chuàng)性工作正在重塑價(jià)值數(shù)萬(wàn)億美元的行業(yè)，例如運(yùn)輸、醫(yī)療保健和制造業(yè)，并推動(dòng)許多其他行業(yè)的發(fā)展。

• Facebook正式改名Meta，扎克伯格All in元宇宙，開(kāi)啟新征程；
• 微軟加入元宇宙大戰(zhàn)：將Mesh直接植入Teams中，將不同元宇宙粘合起來(lái)；
• 中科深智完成B輪融資，利用AI技術(shù)打造元宇宙內(nèi)容生產(chǎn)中臺(tái)。

• 全球第一！阿里達(dá)摩院AI訓(xùn)練模型M6參數(shù)破10萬(wàn)億，遠(yuǎn)超谷歌、微軟；
• 微軟宣布推出Azure OpenAI服務(wù)，為開(kāi)發(fā)者帶來(lái)GPT-3模型，幫助企業(yè)建構(gòu)更聰明的應(yīng)用；
• 全球最大規(guī)模人工智能巨量模型 “源1.0”正式開(kāi)源！2457 億模型參數(shù)，超越美國(guó)GPT-3模型。

3.AI人物：

• 又一巨星隕落！北大計(jì)算語(yǔ)言學(xué)家俞士汶去世，助力漢語(yǔ)走向信息時(shí)代；
• 《科學(xué)之路》| 圖靈獎(jiǎng)得主楊立昆人工智能十問(wèn)：AI會(huì)統(tǒng)治人類(lèi)嗎？

?版權(quán)聲明：如無(wú)特殊說(shuō)明，本站所有內(nèi)容均為AIHub.cn原創(chuàng)發(fā)布和所有。任何個(gè)人或組織，在未征得本站同意時(shí)，禁止復(fù)制、盜用、采集、發(fā)布本站內(nèi)容到任何網(wǎng)站、書(shū)籍等各類(lèi)媒體平臺(tái)。否則，我站將依法保留追究相關(guān)法律責(zé)任的權(quán)利。