NVIDIA ACE現已全面在云端推出,并在RTX AI PC上提供搶先體驗,已獲戴爾科技、ServiceNow、Aww Inc.、英業達、完美世界游戲等多家客戶服務、游戲和醫療保健領域的公司采用
COMPUTEX—2024年6月2日—NVIDIA宣布全面推出NVIDIA ACE生成式AI微服務,以加速新一代數字人的發展,并將在平臺上推出全新的生成式AI突破。客戶服務、游戲和醫療保健領域的公司率先采用ACE技術,以簡化在客戶服務、遠程醫療、游戲和娛樂領域創建、動畫化并操作栩栩如生的數字人的過程。
NVIDIA ACE數字人生成式AI套件現已全面推出,包括以下內容:
● NVIDIA Riva ASR,TTS和NMT — 用于自動語音識別、文本到語音轉換和翻譯。
● NVIDIA Nemotron LLM — 用于語言理解以及根據上下文生成回復。
● NVIDIA Audio2Face — 根據音軌制作栩栩如生的面部動畫。
● NVIDIA Omniverse RTX — 用于實時路徑追蹤以制作逼真的皮膚和毛發。
全新推出的技術包括:
● NVIDIA Audio2Gesture — 用于根據音軌生成肢體手勢,即將推出。
● NVIDIA Nemotron-3 4.5B — 一種全新的小語言模型 (SLM),專為低延遲、本地端RTX AI PC推理而設計。
NVIDIA創始人兼首席執行官黃仁勛表示:“數字人將為各行各業帶來革命性變革。NVIDIA ACE為我們的開發者生態提供多模態大語言模型和神經圖形領域的突破,使我們更接近意圖驅動的計算未來,即與計算機的交互將像與人類的互動一樣自然。”
數字人進駐一億臺RTX AI PC
NVIDIA已將ACE作為NIM微服務提供給開發者在數據中心運行。現在,NVIDIA正在打造ACE PC NIM微服務,可以部署在裝機量達到一億臺的RTX AI PC和筆記本電腦上。
這包括NVIDIA的首個小語言模型(SLM) -- NVIDIA Nemotron-3 4.5B,該模型專門用于在終端設備上運行,具有與在云端運行的大語言模型(LLMs)相似的精度和準確性。Nemotron-3 4.5B 小語言模型(SLM)現已進入搶先體驗階段。NVIDIA Audio2Face和NVIDIA Riva ASR的設備端模型也將很快推出搶先體驗版。
全新的NVIDIA AI Inference Manager (AIM)應用開發工具包簡化了ACE在PC上的部署過程。它以統一格式為PC預先配置必要的AI模型、引擎和依賴包,同時在PC和云端之間完美調度AI推理操作。
與Inworld AI合作開發的最新版Covert Protocol技術Demo在COMPUTEX演示。通過在 GeForce RTX PC上本地運行Audio2Face和Riva ASR,該演示使玩家能夠通過對話來互動,并影響數字人非玩家角色(NPC)的行為,以完成任務。
最新ACE技術擴展數字人生態規模
NVIDIA正與Aww Inc.、戴爾科技、Gumption、Hippocratic AI、英業達、掌趣科技、完美世界游戲、Reality Arts、甲尚科技、ServiceNow、Soulbotix、數字栩生和UneeQ等公司的開發者合作,利用ACE開發各種應用。
Aww Inc. — 位于日本的領先虛擬人技術開發公司Aww Inc.在2018年推出了首個虛擬名星Imma。此后,Imma在50多個國家成為主要全球品牌的代言人。現在,Aww Inc.計劃利用ACE Audio2Face微服務進行實時動畫制作,為用戶提供更好的互動交流體驗。
完美世界游戲 — 游戲開發者和發行商完美世界游戲公司在其全新的神話荒野風格的Legends技術演示Demo中采用了ACE。玩家可以與逼真的 AI NPC 用英語和普通話完全互動。利用NVIDIA Audio2Face NIM,可實時生成與角色聲音響應相符的逼真的面部動畫。
掌趣科技 — 掌趣科技和悠米互娛聯合推出的 Code Z 是一款 AI 游戲創作平臺,能夠利用 AI 技術減少創作開放世界游戲所需的資源,讓個人和小型團隊也能制作大型游戲。Code Z 基于“Faith Framework”AI 機器學習訓練系統,讓創作者無需編寫任何代碼,即可快速生成 3D 游戲場景和數字素材。此外,它還能讓創作者創建和訓練高度個性化的 AI 數字人,實現動態互動和沉浸式體驗。Code Z 采用了 Audio2Face 和 DLSS,使 AI 數字人能夠在與玩家實時對話時生成豐富的表情,并實現實時口型同步。
英業達 — 正在大力投資AI領域的科技公司英業達使用NVIDIA Audio2Face NIM增強其VRSTATE平臺的醫療保健AI客戶端。集成NVIDIA Audio2Face NIM可以提供更具吸引力和安撫性的虛擬咨詢體驗。英業達將在COMPUTEX期間展示一款可以幫助患者獲取健康信息的AI客戶端。
ServiceNow — 用于協助企業業務轉型的AI平臺ServiceNow,近期在其Now Assist Gen AI Experience中展示ACE NIM的生成式AI服務客戶端演示,突顯數字化身在零售、旅游等行業提升客戶和員工互動的潛力。
戴爾科技 — 在上個月的Dell Technologies World上推出用于制作數字助手的最新解決方案Dell Generative AI Solutions。該解決方案使企業能夠利用智能數字助理,通過自然對話的形式與零售、醫療保健和客戶服務等各行各業的客戶進行互動。
NVIDIA在COMPUTEX 2024為數字人初創企業喝彩
NVIDIA藝術團隊使用基于ACE的生成式AI工具,包括Synthesia和Hour One,制作了一個“digital Jensen”化身,該化身由文字生成的視頻制作而成。這款多語言化身以他獨特的聲音和風格為特色,使用ElevenLabs的專有AI語音技術生成普通話和英語的聲音。NVIDIA還與專注于AI語音技術的NVIDIA Inception成員Voicemod合作,為NVIDIA創始人兼首席執行官黃仁勛主題演講的謝幕曲進行創作。
ACE NIM現已推出
用于服務器部署的NVIDIA ACE NIM微服務(包括Riva和Audio2Face)現已投入生產,可添加NVIDIA AI Enterprise應用,供開發者獲得企業級的支持服務。現可點擊注冊以獲取在RTX AI PC上運行的ACE NIM微服務的搶先體驗版。