NVIDIA發(fā)布首個(gè)數(shù)字人設(shè)備端小語(yǔ)言模型，提升游戲角色的對(duì)話(huà)能力

2024 年 8 月 20 日 作者 Jason Paul 分享

2024 年 8 月 20 日，德國(guó)科隆，Gamescom——NVIDIA 宣布首款數(shù)字人小語(yǔ)言模型將在由西山居游戲開(kāi)發(fā)的全新多人機(jī)甲游戲《解限機(jī)》(Mecha BREAK)中演示，這一功能旨在使游戲角色栩栩如生，為 GeForce RTX? AI PC 玩家提供更具活力、更身臨其境的游戲體驗(yàn)。

全新本地模型名為 Nemotron-4 4B Instruct，它提升了游戲角色的對(duì)話(huà)能力，使其能更直觀地理解玩家并做出自然回應(yīng)。

NVIDIA 消費(fèi)級(jí) AI 業(yè)務(wù)副總裁 Jason Paul 表示：“我們優(yōu)化了 ACE 技術(shù)，使其能直接在 GeForce RTX AI PC 和筆記本電腦上運(yùn)行，從而大幅提升開(kāi)發(fā)者在《解限機(jī)》(Mecha BREAK) 等次世代游戲中部署最先進(jìn)數(shù)字人的能力?！?

專(zhuān)為角色扮演游戲設(shè)計(jì)的小語(yǔ)言模型

NVIDIA Nemotron-4 4B Instruct 可提供更好的角色扮演、檢索增強(qiáng)生成 (RAG) 和功能調(diào)用能力，使游戲角色能更準(zhǔn)確地理解玩家指令、回應(yīng)玩家并執(zhí)行更準(zhǔn)確的相關(guān)操作。

NIM 優(yōu)化了顯存占用率，能提供更快的響應(yīng)速度，為開(kāi)發(fā)者利用超過(guò)1億臺(tái)GeForce RTX驅(qū)動(dòng)的PC和筆記本電腦提供途徑。

該模型是 NVIDIA ACE 的一部分，NVIDIA ACE是一套由生成式AI驅(qū)動(dòng)的數(shù)字人技術(shù)，提供語(yǔ)音、智能和動(dòng)畫(huà)功能。Nemotron-4 4BInstruct 可作為 NVIDIA NIM? 提供，讓游戲開(kāi)發(fā)者在云端或設(shè)備端部署。

首款展示 ACE NIM 微服務(wù)的游戲

由金山公司旗下西山居游戲開(kāi)發(fā)的《解限機(jī)》(Mecha BREAK)首次展示了由 ACE 支持的游戲交互— 在設(shè)備端運(yùn)行的 NVIDIA Nemotron-4 4B Instruct NIM。NVIDIA Audio2Face-3D NIM 以及 Whisper 模型可在設(shè)備端運(yùn)行面部動(dòng)畫(huà)和語(yǔ)音識(shí)別。ElevenLabs 通過(guò)云為游戲角色提供語(yǔ)音支持。

在 Demo 中，NVIDIA ACE 和數(shù)字人技術(shù)使玩家能與機(jī)械師 NPC 互動(dòng)，該角色可幫助玩家從各種機(jī)甲中進(jìn)行選擇，以滿(mǎn)足玩家的游戲風(fēng)格或團(tuán)隊(duì)需求，協(xié)助進(jìn)行外觀定制，就如何最好地準(zhǔn)備龐大的戰(zhàn)斗機(jī)器提供建議。

西山居游戲首席執(zhí)行官郭煒煒表示：“我們很高興在《解限機(jī)》(Mecha BREAK) 中展示 ACE NIM 的強(qiáng)大潛力，利用 Audio2Face 和 Nemotron-4 4B Instruct 大幅提升游戲沉浸感。”

完美世界游戲探索最新的數(shù)字人技術(shù)

NVIDIA ACE和數(shù)字人技術(shù)持續(xù)擴(kuò)大游戲行業(yè)影響力。

全球游戲發(fā)行商和開(kāi)發(fā)者完美世界游戲 (Perfect World Games) 正利用全新AI視覺(jué)功能推進(jìn)其 NVIDIA ACE 和數(shù)字人技術(shù)Demo《傳奇》(Legends)。在 Demo 中，角色 “云霓”可以使用由 ChatGPT-4o 支持的 PC 攝像頭識(shí)別現(xiàn)實(shí)世界中的玩家和物體，為游戲體驗(yàn)增添一個(gè)增強(qiáng)現(xiàn)實(shí)層。這些功能將PC游戲的沉浸感和可訪(fǎng)問(wèn)性提升到全新水平。