随着元宇宙等新概念的兴起,虚拟数字世界与真实物理世界的联系进一步加深。在虚拟的数字世界中,我们将能够通过全新的数字分身完成日常娱乐,甚至学习或工作,在虚拟和现实世界之间无缝穿梭。
在虚拟现实中,我们可能需要不同的头像作为数字头像存在,如何构建一个高质量的“数字头像”可能会成为未来很多用户关注的焦点。近期,OPPO推出了一项新的AI技术,未来可能会帮助用户轻松创建自己的“数字二重身”。
OPPO在业内首次发布了这项最新的AI技术。这项技术可以自动为穿着宽松的人体创建动态数字双胞胎。手机摄像头拍摄的RGB视频可以创建一个用户的“三维头像”,并捕捉一系列相应的动态细节。
在过去,角色建模需要佩戴捕捉设备,这需要大量的时间和经济成本。但是在OPPO发布的这项技术上,它的捕捉和门槛都大大降低了。只有用几台OPPO Find X5 Pro对人物周围进行多角度拍摄,才能记录下一系列人体形态数据,为下一部《数码分身》打下基础。
OPPO推出了这项技术,不同于以往使用2D图像进行重建的原理。视频录制完成后,AI可以通过手机录制的RGB数据进行计算,生成3D人体模型,克服了以往方法可能带来的误差问题。
通过OPPO的一个专业舞者,我们捕捉到了她的动作,设置了一系列骨骼状态节点,构建了一套结构化的局部辐射场。局部辐射场可以模拟其对应节点周围的局部空的形状和外观,并根据身体姿势和服装风格的动态细节而变化。OPPO的AI技术也可以通过残留动作更好地反映舞蹈过程中礼服摆动的细微变化。这套技术模型还可以处理一系列跳舞动作,可以继续学习,支持更多的应用场景。
经过几个小时的编码和渲染,可以生成OPPO最新AI技术打造的数字二重身,动作可以精确组合。在数字世界里,它像专业舞者一样跳舞,所有动作都和现实世界里几乎一样。
OPPO的数字二重身实验室透露,传统的创建3D建模的方法在观察和分离人体姿态和服装变形方面面临很大的困难。在现阶段神经场景渲染技术的支持下,OPPO突破了传统的NeRF模型,将其分解为一组结构化的局部辐射场,由身体骨架驱动,嵌入动态细节,从而提供了一种泛化性能更好的方案。
数字二重身实验室的这套算法可以带来更精细的局部辐射场,在骨架运动、残留运动和时间变化细节上有更好的表现,可以更好地学习和生成一系列场景。在未来,当虚拟的数字世界和真实的物理世界更加紧密地结合在一起时,OPPO创造的这套算法可能会帮助用户更好地生成自己的数字化身,并在平行世界中更好地表达出来。
OPPO数字业余实验室也提到,这项技术的推出并不是终点。未来,OPPO还将进行一系列基础研究和应用,为更多行业赋能。
在未来的应用场景中,数字二重身将进一步推动和辅助人类社会的发展,在各种场景中带来前所未有的体验。OPPO也将继续发力,赋能用户的应用,开启更多智能化的未来可能。