6月3日消息,NVIDIA宣布全面推出NVIDIA ACE生成式AI微服務(wù),以加速新一代數(shù)字人的發(fā)展,并將在平臺(tái)上推出全新的生成式AI突破??蛻舴?wù)、游戲和醫(yī)療保健領(lǐng)域的公司率先采用ACE技術(shù),以簡(jiǎn)化在客戶服務(wù)、遠(yuǎn)程醫(yī)療、游戲和娛樂(lè)領(lǐng)域創(chuàng)建、動(dòng)畫(huà)化并操作栩栩如生的數(shù)字人的過(guò)程。
NVIDIA ACE數(shù)字人生成式AI套件現(xiàn)已全面推出,包括以下內(nèi)容:
● NVIDIA Riva ASR,TTS和NMT — 用于自動(dòng)語(yǔ)音識(shí)別、文本到語(yǔ)音轉(zhuǎn)換和翻譯。
● NVIDIA Nemotron LLM — 用于語(yǔ)言理解以及根據(jù)上下文生成回復(fù)。
● NVIDIA Audio2Face — 根據(jù)音軌制作栩栩如生的面部動(dòng)畫(huà)。
● NVIDIA Omniverse RTX — 用于實(shí)時(shí)路徑追蹤以制作逼真的皮膚和毛發(fā)。
全新推出的技術(shù)包括:
● NVIDIA Audio2Gesture — 用于根據(jù)音軌生成肢體手勢(shì),即將推出。
● NVIDIA Nemotron-3 4.5B — 一種全新的小語(yǔ)言模型 (SLM),專為低延遲、本地端RTX AI PC推理而設(shè)計(jì)。
NVIDIA創(chuàng)始人兼首席執(zhí)行官黃仁勛表示:“數(shù)字人將為各行各業(yè)帶來(lái)革命性變革。NVIDIA ACE為我們的開(kāi)發(fā)者生態(tài)提供多模態(tài)大語(yǔ)言模型和神經(jīng)圖形領(lǐng)域的突破,使我們更接近意圖驅(qū)動(dòng)的計(jì)算未來(lái),即與計(jì)算機(jī)的交互將像與人類的互動(dòng)一樣自然。”
數(shù)字人進(jìn)駐一億臺(tái)RTX AI PC
NVIDIA已將ACE作為NIM微服務(wù)提供給開(kāi)發(fā)者在數(shù)據(jù)中心運(yùn)行?,F(xiàn)在,NVIDIA正在打造ACE PC NIM微服務(wù),可以部署在裝機(jī)量達(dá)到一億臺(tái)的RTX AI PC和筆記本電腦上。
這包括NVIDIA的首個(gè)小語(yǔ)言模型(SLM) -- NVIDIA Nemotron-3 4.5B,該模型專門用于在終端設(shè)備上運(yùn)行,具有與在云端運(yùn)行的大語(yǔ)言模型(LLMs)相似的精度和準(zhǔn)確性。Nemotron-3 4.5B 小語(yǔ)言模型(SLM)現(xiàn)已進(jìn)入搶先體驗(yàn)階段。NVIDIA Audio2Face和NVIDIA Riva ASR的設(shè)備端模型也將很快推出搶先體驗(yàn)版。
全新的NVIDIA AI Inference Manager (AIM)應(yīng)用開(kāi)發(fā)工具包簡(jiǎn)化了ACE在PC上的部署過(guò)程。它以統(tǒng)一格式為PC預(yù)先配置必要的AI模型、引擎和依賴包,同時(shí)在PC和云端之間完美調(diào)度AI推理操作。
與Inworld AI合作開(kāi)發(fā)的最新版Covert Protocol技術(shù)Demo在COMPUTEX演示。通過(guò)在 GeForce RTX PC上本地運(yùn)行Audio2Face和Riva ASR,該演示使玩家能夠通過(guò)對(duì)話來(lái)互動(dòng),并影響數(shù)字人非玩家角色(NPC)的行為,以完成任務(wù)。
最新ACE技術(shù)擴(kuò)展數(shù)字人生態(tài)規(guī)模
NVIDIA正與Aww Inc.、戴爾科技、Gumption、Hippocratic AI、英業(yè)達(dá)、掌趣科技、完美世界游戲、Reality Arts、甲尚科技、ServiceNow、Soulbotix、數(shù)字栩生和UneeQ等公司的開(kāi)發(fā)者合作,利用ACE開(kāi)發(fā)各種應(yīng)用。
Aww Inc. — 位于日本的領(lǐng)先虛擬人技術(shù)開(kāi)發(fā)公司Aww Inc.在2018年推出了首個(gè)虛擬名星Imma。此后,Imma在50多個(gè)國(guó)家成為主要全球品牌的代言人?,F(xiàn)在,Aww Inc.計(jì)劃利用ACE Audio2Face微服務(wù)進(jìn)行實(shí)時(shí)動(dòng)畫(huà)制作,為用戶提供更好的互動(dòng)交流體驗(yàn)。
完美世界游戲 — 游戲開(kāi)發(fā)者和發(fā)行商完美世界游戲公司在其全新的神話荒野風(fēng)格的Legends技術(shù)演示Demo中采用了ACE。玩家可以與逼真的 AI NPC 用英語(yǔ)和普通話完全互動(dòng)。利用NVIDIA Audio2Face NIM,可實(shí)時(shí)生成與角色聲音響應(yīng)相符的逼真的面部動(dòng)畫(huà)。
掌趣科技 — 掌趣科技和悠米互娛聯(lián)合推出的 Code Z 是一款 AI 游戲創(chuàng)作平臺(tái),能夠利用 AI 技術(shù)減少創(chuàng)作開(kāi)放世界游戲所需的資源,讓個(gè)人和小型團(tuán)隊(duì)也能制作大型游戲。Code Z 基于“Faith Framework”AI 機(jī)器學(xué)習(xí)訓(xùn)練系統(tǒng),讓創(chuàng)作者無(wú)需編寫(xiě)任何代碼,即可快速生成 3D 游戲場(chǎng)景和數(shù)字素材。此外,它還能讓創(chuàng)作者創(chuàng)建和訓(xùn)練高度個(gè)性化的 AI 數(shù)字人,實(shí)現(xiàn)動(dòng)態(tài)互動(dòng)和沉浸式體驗(yàn)。Code Z 采用了 Audio2Face 和 DLSS,使 AI 數(shù)字人能夠在與玩家實(shí)時(shí)對(duì)話時(shí)生成豐富的表情,并實(shí)現(xiàn)實(shí)時(shí)口型同步。
英業(yè)達(dá) — 正在大力投資AI領(lǐng)域的科技公司英業(yè)達(dá)使用NVIDIA Audio2Face NIM增強(qiáng)其VRSTATE平臺(tái)的醫(yī)療保健AI客戶端。集成NVIDIA Audio2Face NIM可以提供更具吸引力和安撫性的虛擬咨詢體驗(yàn)。英業(yè)達(dá)將在COMPUTEX期間展示一款可以幫助患者獲取健康信息的AI客戶端。
ServiceNow — 用于協(xié)助企業(yè)業(yè)務(wù)轉(zhuǎn)型的AI平臺(tái)ServiceNow,近期在其Now Assist Gen AI Experience中展示ACE NIM的生成式AI服務(wù)客戶端演示,突顯數(shù)字化身在零售、旅游等行業(yè)提升客戶和員工互動(dòng)的潛力。
戴爾科技 — 在上個(gè)月的Dell Technologies World上推出用于制作數(shù)字助手的最新解決方案Dell Generative AI Solutions。該解決方案使企業(yè)能夠利用智能數(shù)字助理,通過(guò)自然對(duì)話的形式與零售、醫(yī)療保健和客戶服務(wù)等各行各業(yè)的客戶進(jìn)行互動(dòng)。
NVIDIA在COMPUTEX 2024為數(shù)字人初創(chuàng)企業(yè)喝彩
NVIDIA藝術(shù)團(tuán)隊(duì)使用基于ACE的生成式AI工具,包括Synthesia和Hour One,制作了一個(gè)“digital Jensen”化身,該化身由文字生成的視頻制作而成。這款多語(yǔ)言化身以他獨(dú)特的聲音和風(fēng)格為特色,使用ElevenLabs的專有AI語(yǔ)音技術(shù)生成普通話和英語(yǔ)的聲音。NVIDIA還與專注于AI語(yǔ)音技術(shù)的NVIDIA Inception成員Voicemod合作,為NVIDIA創(chuàng)始人兼首席執(zhí)行官黃仁勛主題演講的謝幕曲進(jìn)行創(chuàng)作。
ACE NIM現(xiàn)已推出
用于服務(wù)器部署的NVIDIA ACE NIM微服務(wù)(包括Riva和Audio2Face)現(xiàn)已投入生產(chǎn),可添加NVIDIA AI Enterprise應(yīng)用,供開(kāi)發(fā)者獲得企業(yè)級(jí)的支持服務(wù)?,F(xiàn)可點(diǎn)擊注冊(cè)以獲取在RTX AI PC上運(yùn)行的ACE NIM微服務(wù)的搶先體驗(yàn)版。(新喀鴉)
(免責(zé)聲明:本網(wǎng)站內(nèi)容主要來(lái)自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。
任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書(shū)面權(quán)利通知或不實(shí)情況說(shuō)明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開(kāi)相關(guān)鏈接。 )