1987WEB视界-分享互联网热门产品和行业

您现在的位置是:首页 > 人工智能AI > 正文

人工智能AI

虚拟数字人制作平台OmniverseACE抢先体验版已发布

1987web2023-10-07人工智能AI120

公众号关注 丽台科技

设为星标⭐,第一时间获取最新资讯!

Omniverse Avatar Cloud Engine 现已供抢先体验,可用于进行交互式虚拟形象的自定义和部署。

构建虚拟形象和虚拟助手的开发者和团队现可注册加入NVIDIA Omniverse Avatar Cloud Engine(ACE)抢先体验计划。这是一套云原生 AI 微服务,可助力更轻松地大规模构建和部署智能虚拟助手和数字人。

Omniverse ACE 能够简化虚拟形象的开发,提供为任何虚拟形象添加智能和动画所必需的 AI 构建模块,可构建于几乎任何引擎上,并部署于任何云端。这些 AI 助手面向各行各业,可助力组织增强当前工作流,并解锁新的商机。

ACE 是数种生成式 AI 应用程序之一,可助力创作者加速 3D 世界和元宇宙的开发。加入该计划的成员将获得 NVIDIA AI 微服务预发布版本的访问权限,以及为交互式虚拟形象应用程序开发云原生 AI 工作流所需的工具和文档。

借助 Omniverse ACE

打造栩栩如生的交互式 AI 虚拟形象

虚拟形象的开发通常需要专业知识、专用设备和人工密集型工作流。为简化虚拟形象的创建,Omniverse ACE 使 NVIDIA 的 AI 技术(包括预构建模型、工具集和特定领域的参考应用程序)能够无缝集成到基于大多数引擎构建并部署在公共或私有云上的虚拟形象应用程序中。

自 9 月推出以来,Omniverse ACE 已被分享至选定的合作伙伴以获取早期反馈。现在,NVIDIA 正在寻找更多合作伙伴,期待他们提供有关微服务的反馈,合作改进产品,并在逼真的交互式数字人方面突破创新。

抢先体验计划包括访问 ACE 动画 AI 和对话式 AI 微服务的预发布版本,包括:

  • 3D 动画 AI 微服务用于第三方虚拟形象,使用 Omniverse Audio2Face 生成式 AI,仅基于音频文件来创建逼真的面部动画,使虚幻引擎和其他渲染工具中的角色能够栩栩如生。

  • 2D 动画 AI 微服务名为 Live Portrait,可使用实时视频源,轻松制作 2D 肖像或风格化人脸动画。

  • 文本转语音微服务使用 NVIDIA Riva TTS,基于原始转录文字,无需任何额外信息(例如语音模式或节奏),即能合成听起来自然的语音。

该计划的成员还将获得工具、示例参考应用程序和支持资源的访问权限,这些将有助于成员着手启动。

虚拟形象在各行各业得以应用

Omniverse ACE 可助力团队构建交互式数字人,提升各行各业的体验,提供:

  • 简单的角色动画使用户只需很少的专业知识,就能打造出栩栩如生的角色动画。

  • 云端部署的能力意味着虚拟形象几乎可在任何地点使用,例如快餐店售货亭、平板电脑或 VR 头显。

  • 基于 NVIDIA 统一计算框架(UCF)构建的即插即用套件可实现 NVIDIA AI 与其他解决方案之间的互操作性,确保最先进的 AI 能够适用于所有用例。

Ready Player Me 和 Epic Games 等合作伙伴体验了 Omniverse ACE 如何增强 AI 虚拟形象的工作流。

Omniverse ACE 动画 AI 微服务支持来自 Ready Player Me 的 3D 角色,这是一个用于构建跨游戏虚拟形象的平台。

Ready Player Me 首席执行官兼联合创始人 Timmu Tõke 表示:数字虚拟形象正在成为我们日常生活的重要组成部分。人们在游戏、虚拟活动和社交应用程序中会使用虚拟形象,甚至会将其作为进入元宇宙的一种方式。我们花了七年时间,构建了完美的虚拟形象系统,让开发者能够轻松地集成到自己的应用程序和游戏中,并让用户能够创建一个虚拟形象来探索不同的世界。如今,借助 NVIDIA Omniverse ACE,团队能够更轻松地让这些角色看起来栩栩如生。

Epic Games 先进的 MetaHuman 技术改变了逼真、高保真数字人的创建。Omniverse ACE 与 MetaHuman 框架相结合,将使用户能够更轻松地设计和部署引人入胜的 3D 虚拟形象。

数字人不仅可以具有对话能力,也可以成为歌手,就像 AI 虚拟形象 Toy Jensen(简称 TJ)一样。NVIDIA 的创意团队迅速创作了一个 TJ 演唱《铃儿响叮当》的动画视频,使用 Omniverse ACE 来提取歌手的声音,并将其转换为 TJ 的声音。这使虚拟形象能够以与原始艺术家相同的音高和节奏来演唱。

许多创作者正在尝试 VTubing,这是一种新的直播方式,用户以 2D 虚拟形象出镜并与观众互动。借助 Omniverse ACE,创作者可以将虚拟形象从 2D 动画转换为 3D,包括照片和风格化的头像。用户可从云端渲染虚拟形象,在任何地点都能为角色制作动画。

此外,NVIDIA Tokkio 参考应用程序正在扩展,早期合作伙伴正在为电信、银行等行业构建云原生客服虚拟形象。

构建虚拟形象和虚拟助手的开发者和团队可抢先体验 Omniverse ACE,点击文末阅读原文即可申请试用抢先体验。

*本文转载自NVIDIA英伟达企业解决方案。

*与NVIDIA产品相关的图片或视频(完整或部分)的版权均归NVIDIA Corporation所有。

NVIDIA Omniverse™ 丽台资料栈现已上线,扫描下方海报二维码,立即开启 Omniverse 全面之旅。

- END -

2、天地在线

基本面:市值23.52亿,现价18.39,市盈率43.48,市净率2.29,第二季度利润-0.11亿,同比增长-126.93%。

相关概念:公司已推出虚拟数字人元启沉侵式虚拟数字综合体InfiniteBox,数字藏品发行平台无限数藏等产品,初步构建在数字人,XR虚拟数字场景,数字资产等领域的商业化矩阵。

A股:八大“虚拟数字人”龙头公司一览(附名单)

导语:A股:八大虚拟数字人龙头公司一览(附名单)

  • 下一篇

    科创大讲堂由智东西公开课全新企划,旨在连接科创家和优秀开发者,以及学者和投资人,主讲人工智能、硬科技、智能制造、元宇宙等新兴科技领域的重大创新与实践探索。

    元宇宙热度加持下,虚拟数字人破圈而出,成为该产业最成熟的商业化应用之一。作为元宇宙原住民,虚拟数字人已在各种应用场景中大放异彩,像虚拟偶像洛天依、柳夜熙,各大媒体的虚拟主持人:央视网小C、人民日报果果,虚拟员工:百信银行AIYA等。

    虚拟数字人是指具有数字化外形的虚拟人物,采用计算机数字建模技术,利用图形学、图形渲染模拟人物形象,通过动作、面部捕捉等技术模拟真实人物表情神态特征,并运用深度学习、语义理解、语音合成等手段形成具有人的外观、行为、思想的综合产物。从技术层面看,虚拟数字人的发展分为3个阶段:

    第1阶段,虚拟数字人的制作以人物形象+ Vocaloid语音合成为主,生成具有美丽外表的虚拟数字人,像洛天依;

    第2阶段,虚拟数字人的核心技术是2D/3D建模+实时动作捕捉+真人配音,例如虚拟数字歌手聆秋、沐汐,美妆达人柳夜熙;

    第3阶段,虚拟数字人不但可以预测嘴唇的动作,还可以用文字合成语音来表达,整个虚拟数字人的面容、身体、声音、动作生成均由AI实现,具有真人质感、辨识度高、互动性强的特点,是更接近人形的超写实虚拟数字人。

    超写实虚拟数字人的制作过程涉及建模、驱动和渲染三大环节。建模环节以动态光场重建技术为主,通过直接采集三维世界的光线,不仅可以重建人物的几何模型,还可以获取动态的人物模型数据,高品质的重现不同视角下人体的光影效果。

    建模完成后想要冰冷的模型动起来,还需要进行一系列的驱动技术,像利用微表情追踪、语音识别、语音合成、NLP、动作和人脸捕捉等技术学习人物的语音、唇形、表情间的潜在关系,还原人脸骨骼和肌肉的细微变化,得到逼真的表情。

    为了提升虚拟数字人的逼真程度,还需要渲染技术帮忙。渲染通过加入几何、视点、纹理、照明和阴影等信息,完成虚拟数字人模型到图像的转变,使虚拟数字人皮肤纹理更真实。目前渲染技术分为离线渲染和实时渲染两类,离线渲染受限于设备和软件架构,根据预先定义好的光线、轨迹渲染图片,主要用于2D虚拟数字人;而实时云渲染可以实时计算并输出图形数据,每一帧都针对当时实际环境光源、相机位置和材质参数计算出的图像,大多用于3D虚拟数字人。

    为了让大家更好地了解超写实虚拟数字人制作的核心技术,智东西公开课策划推出科创大讲堂「虚拟数字人技术专场」。现阶段先上线三讲,并邀请叠镜数字研发部副经理孙正忠、瑞云科技产品总监赵志杰和凌云光技术视效部总监曾义三位技术大牛参与,分别从超写实虚拟数字人的光场重建技术、实时云渲染技术和视效科技等方面进行讲解。

    5月23日晚7点,叠镜数字研发部副经理孙正忠将带来第1讲的直播讲解,主题为《超写实虚拟数字人光场重建技术解析与应用》。孙正忠老师首先将对虚拟数字人建模的技术路径进行比较分析,然后深度剖析人体光场重建技术,并对基于光场重建的超写实虚拟数字人制作进行系统解析。最后,他会对超写实虚拟数字人的应用与创新进行介绍。

    6月8日晚7点,瑞云科技产品总监赵志杰将以《实时云渲染加速3D超写实虚拟数字人制作推广》为主题带来第2讲的直播讲解。赵志杰老师首先将介绍渲染在虚拟数字人制作中的重要性,并对3D超写实虚拟数字人开发面临的渲染挑战展开分析。之后赵志杰老师会重点讲解实时云渲染技术的原理,以及如何操作实时云渲染平台3DCAT加速3D超写实虚拟数字人制作推广。

    第3讲将于6月15日晚7点进行,由凌云光技术视效部总监曾义主讲。曾义老师将围绕《超写实级数字人的制作流程及视效科技解析》这一主题,从超写实级数字人内容创作需求及难点、制作流程、视效科技和影视级应用案例等方面进行系统分析。

    「虚拟数字人技术专场」每一讲都将以视频直播形式在智东西公开课知识店铺进行。每一讲由40分钟主讲与20分钟问答组成。针对「虚拟数字人技术专场」,也组建了专属交流群,届时将邀请三位主讲人加入,欢迎大家报名和申请入群。

    报名方式

    对「虚拟数字人技术专场」感兴趣的朋友,可以扫描下方二维码添加小助手昕怡进行报名。

    同时为了便于交流,针对「虚拟数字人技术专场」还将设置专属交流群,并邀请主讲人入群。想要加入交流群与主讲人认识的朋友,也可以添加昕怡进行申请。

    全面解析超写实虚拟数字人制作的核心技术!科创大讲堂「虚拟数字人技术专场」下周直播