用数字人扫描技术制作仿真虚拟数字人有何用?
原标题:用数字人扫描技术制作仿真虚拟数字人有何用?
易车上线首个仿真虚拟数字人楚二,该虚拟数字人是通过数字人扫描技术,复刻了易车王牌IP节目主持人楚少。并且虚拟数字人楚二将通过惯性动捕设备,与楚少一起主持易车评测类节目以及直播,并与车友实时互动。
*图片源于网络
这种通过数字人扫描技术制作出的仿真虚拟数字人,与往常直接CG建模不同之处在于,是通过数字人扫描设备进行复刻真人,以真人为原型制作,如广州虚拟动力的数字人扫描设备来说,可以瞬时扫描高清成像,扫描精度高达毫米级,3分钟内重建出脸部模型,具有60-100万以上面数。借助数字人扫描设备制作的数字人,使其极具辨识度与真实度。
通过数字人扫描设备制作出的仿真虚拟数字人,可以利用动捕设备,对真人在现实的三维空间中的运动轨迹进行实时跟踪、测量和记录,如动捕设备vdsuit full,高精度捕捉身体、手指动作,让数字人不限空间、时间的限制,快速融入企业应用场景之中,从虚拟主播、虚拟代言人到数字员工等,以多种数字人身份结合动捕设备,帮助企业进一步实现商业变现。
如今,在元宇宙热潮下,企业逐渐通过多元化、新颖的数字人形式,利用动捕设备赋能更多业务发展,而数字人扫描设备可以帮助企业制作出高精度超写实数字人,作为企业发言人,结合动捕设备应用在直播、短视频、线下互动等场景,为用户提供更好的交互体验。
真人驱动型VS 算法驱动型
根据驱动方式的不同,虚拟数字人可分为真人驱动型和算法驱动型,后者是近年来多模态技术和深度学习技术发展的集大成者。
虚拟数字人有什么特点?其发展趋势怎么样?
虚拟数字人是指具有数字化外形的虚拟人物,采用计算机数字建模技术,利用图形学、图形渲染模拟人物形象,通过动作、面部捕捉等技术模拟真实人物表情神态特征,并运用深度学习、语义理解、语音合成等手段形成具有人的外观、行为、思想的综合产物。从技术层面看,虚拟数字人的发展分为3个阶段:
第1阶段,虚拟数字人的制作以人物形象+ Vocaloid语音合成为主,生成具有美丽外表的虚拟数字人,像洛天依;
第2阶段,虚拟数字人的核心技术是2D/3D建模+实时动作捕捉+真人配音,例如虚拟数字歌手聆秋、沐汐,美妆达人柳夜熙;
第3阶段,虚拟数字人不但可以预测嘴唇的动作,还可以用文字合成语音来表达,整个虚拟数字人的面容、身体、声音、动作生成均由AI实现,具有真人质感、辨识度高、互动性强的特点,是更接近人形的超写实虚拟数字人。
超写实虚拟数字人的制作过程涉及建模、驱动和渲染三大环节。建模环节以动态光场重建技术为主,通过直接采集三维世界的光线,不仅可以重建人物的几何模型,还可以获取动态的人物模型数据,高品质的重现不同视角下人体的光影效果。
解析超写实虚拟数字人制作的核心技术
元宇宙热度加持下,虚拟数字人破圈而出,成为该产业最成熟的商业化应用之一。作为元宇宙原住民,虚拟数字人已在各种应用场景中大放异彩,像虚拟偶像洛天依、柳夜熙,各大媒