NVIDIA 通过全新 ACE 插件和微服务简化 AI 驱动的 MetaHuman 部署

摘要

Unreal Fest Seattle 2024 于北京时间 2024 年 10 月 2 日拉开帷幕,NVIDIA 宣布在虚幻引擎 5 中为 NVIDIA ACE 发布新的设备端插件, 从而简化在 Windows PC 上创建和部署 AI 驱动的 MetaHuman 角色的过程。点击完整 Blog 了解详情。

Unreal Fest Seattle 2024 于北京时间 2024 年 10 月 2 日拉开帷幕,NVIDIA 宣布在虚幻引擎 5 中为 NVIDIA ACE 发布新的设备端插件, 从而简化在 Windows PC 上创建和部署 AI 驱动的 MetaHuman 角色的过程。

主要亮点:

全新虚幻引擎 5 ACE 插件:

Audio2Face-3D插件:在虚幻引擎 5 中直接开启 AI 驱动的口型同步和面部动画。

Nemotron-Mini 4B Instruct插件: 为交互式角色对话提供响应生成功能。

检索增强生成(RAG)插件: 提供上下文信息以增强角色互动。

用于Autodesk MayaAudio2Face-3D插件:

便于在 Maya 中制作高质量、音频驱动的面部动画。

包括用于自定义与和其他数字内容创建工具集成的源代码。

简化 Maya 和虚幻引擎 5 之间的工作流。

采用像素流送的虚幻引擎 5 渲染器微服务:

采用 Epic 的虚幻引擎像素流送 (Unreal Pixel Streaming) 技术。

现已支持 NVIDIA ACE Animation Graph 微服务和 Linux 操作系统的抢先体验。

允许开发者通过网络实时通信 (WebRTC) 将高保真 MetaHuman 角色流式传输到任何设备。

为开发者带来的益处:

简化 AI 驱动的数字人集成到游戏和应用中的过程。

在 Windows PC 上优化微服务以实现低延迟和最小显存占用。

增强数字人基于云部署的可扩展性。

提供可定制的工具和源代码, 以满足定制开发需求。

开发者可申请提前下载虚幻引擎 5 渲染器微服务, 该服务支持 Animation Graph 微服务和 Linux 操作系统。Maya ACE 插件可在 GitHub 下载。

关于 NVIDIA

NVIDIA 是加速计算领域的全球领导者。

# # #

来源:互联网

最新文章

极客公园

用极客视角,追踪你不可错过的科技圈.

极客之选

新鲜、有趣的硬件产品,第一时间为你呈现。

张鹏科技商业观察

聊科技,谈商业。