给B端和C端用户带来更好的体验,「新畅元」推出AI多模态+全生成虚拟数字人早期项目
随着计算机算力、软件算法及相关硬件设备的发展,虚拟数字人技术已逐渐在多种场景完成落地,虚拟数字人本身也从2D的纸片时代走向了3D写实时代。
创办于2022年「新畅元」是一家年轻的虚拟数字人技术解决方案厂商。虽然公司创办不到一年,凭借创始成员多年的技术和专利积累,让新畅元成立不久便推出了一系列落地产品。
作为新畅元的联合创始人兼CEO,邱见明是清华大学电子工程系博士、深圳清华大学研究院虚拟数字人研发中心主任,拥有近20年的技术研发、跨行业投融资、公司建构、管理与运营经验。
虚拟数字人的背后是一个庞大的技术体系,过去十多年里,建模、渲染、驱动、声音等相关的技术领域都面临着各种各样的发展难题,而这些难题也需要长期探索才能攻克。邱见明说道。
早在2009年,新畅元首席科学家刘烨斌教授的清华团队便通过研究虚拟数字人的采集系统级相关技术,获得了国家发明技术二等奖,2012年进一步产出的成果获得了一等奖。清华团队的多相机采集系统,能够在现有的硬件条件下获得效果最佳、精度最高的采集数据,团队也因此在多图像三维重建精度方面连续7年排名国际第⼀。
新畅元的人机交互及虚拟数字人相关技术矩阵
邱见明表示,现阶段芯片硬件技术进入了平稳发展期,在生成式数字人领域,算法将扮演更重要的角色,而高质量的算法能力是新畅元打造AIGC数字人多模态内容生成与互动系统的核心竞争力。
新畅元的解决方案矩阵,能够基于独立人群画像,划分细分应用场景,价值体系将逐步覆盖广告营销、娱乐文旅、影视传媒、企业服务、社交、养老等行业领域。
近期,新畅元基于其AvatarVerse引擎正式推出了全生成2D数字人产品。使用新畅元多模态系统的虚拟数字人,能够实现嘴唇、表情(喜怒哀乐等)、肢体动作等全方位的AI驱动,效果相比于传统CG建模数字人或者唇形驱动的2D真人数字人更真实、自然。
完成1.0产品的上线后,新畅元团队也在积极准备2.0阶段的生成式3D数字人产品,预计将于2024年正式上线。邱见明表示,对比现有的3D美工数字人,生成式3D数字人不仅制作周期短,成本低,后期维护使用也非常便利,结合环境变光照系统,能够实现虚拟数字人与真实场景结合不违和,这类虚拟数字人也将有机会成为XR时代的重要内容来源。
相比Meta现阶段的方案,新畅元数字人采集算法更优,算力需求更小
商业模式方面,新畅元此前已推出了定制服务,团队能够为企业级客户提供API接口和后台系统,进行整套AI技术的落地;客户涵盖营销,融媒体,直播,游戏,客服等多种新场景。随着2D数字人产品的推出,新畅元也正式上线了SaaS形式的短视频内容生成平台和数字人直播互动客户端。
团队方面,新畅元拥有来自于清华大学、微软、阿里巴巴等机构及科技大厂的核心技术人员,覆盖软硬件技术开发、投融资等不同领域。截至目前,团队2023年已在CVPR2023*发表文章2篇;在SIGGRAPH2023*发表文章5篇,ICCV2023发表4篇。
据了解,新畅元创办之初曾完成天使轮融资。
虚拟数字人具有以下几个方面的优势,可以使其成为一种有潜力的教育和学习工具:
1、可以根据个体差异进行个性化教学。虚拟数字人可以通过人工智能技术,分析学生的学习情况,为每个学生提供定制化的学习方案,以满足学生不同的学习需求和节奏。
2、可以创造虚拟的学习场景和体验。虚拟数字人可以创建虚拟的学习场景和环境,使学生能够在虚拟世界中进行实践和探索,以更好地理解和掌握学习内容。
3、可以提供跨文化和多语言的学习体验。虚拟数字人可以通过自然语言处理技术,为学生提供多语言的学习服务,帮助学生跨越语言和文化的障碍。
4、可以为教师和学生提供更多的反馈和支持。虚拟数字人可以通过自动化的方式,为学生提供即时的反馈和指导,帮助学生及时纠正错误,提高学习效率。同时,虚拟数字人也可以为教师提供更多的支持和资源,以提高教学效果。
虚拟数字人作为教育和学习工具还存在以下挑战:
1、技术成熟度不够。虚拟数字人技术仍处于发展阶段,需要进一步的技术研发和完善,才能更好地应用于教育和学习领域。
2、学习效果需要验证。虚拟数字人作为一种新的教育和学习工具,其学习效果需要进一步的研究和验证,以确定其对学生学习成果的影响。
虚拟数字人:数字时代的教育黑科技?
在数字化时代,虚拟数字人逐渐成为人们关注的焦点。虚拟数字人是指通过计算机模拟和人工智能技术创造出来的一种虚拟个体,具备类似于真实人类的行为、语言和表情等特征。虚
世优科技AI数字人直播平台具有双AI数字人直播系统、更智慧的AI数字人、多样化的互动模式、兼容多个直播平台、支持数字人融合实拍场景、分钟级内容生成六大产品特性:
1、双AI数字人直播系统
世优AI数字人直播系统可接入AI数字人助理,助理与数字人主播同屏直播;
2、更智慧的AI数字人
世优AI数字人直播系统接入了世优科技自主研发的快速学习小模型世优BOTA,基于专有知识库做个性化模型训练,使数字人虚拟主播可以自动进行语音、文字等方面的识别和互动,以配合相关活动做一些娱乐形式的展示;
世优科技发布AI数字人直播软件,轻松搭建虚拟数字人主播直播间国际在线2023-06-2810:27北京国际在线2023-06-2810:27北京
近年来,直播行业迈入快速发展期,已然成为了品牌最火热的营销方式之一,然而,随着直播行业不断发展,面临的挑战和问题也越来越明显。首先,直播间搭建初期需要进行较大的