【VR陀螺快讯】近日,Epic公司发布了一段与数字王国合作开发的实时写实数字面部捕捉技术解析。视频中采访了数字王国开发小组的总监Darren Hendler和软件R&D总监Doug Roble。
总监Darren Hendler表示:“在过去的10年里。我们一直致力于面部动画的制作,主要是为电影创造真实的面部动画。而在最近几年我发现这其中有了巨大的转变,随着AI深度学习的发展以及我们积极参与到其中的一些研究中,我们尝试拿面部形状区域,将其作为一种绑定,然后给绑定做成动画,用于了解我们到底能用它来做什么?而就在这其中我们发现,我们可以通过这项科技去捕捉他表情和他们脸的移动方式,而这实际是从单一相机重建脸部到AI系统学习识别理解重新创造人脸的过程。在这个过程我们不需要进行任何分解或者压缩,或者丢失具有强表现力的特征。这是非常不可思议的事情。”
“如今我们做到了,这不像以前需要花费几个星期或几个月的时间去进行渲染,现在我们能够立即实现,而且足够快,我们开始做实时且的非常逼真的面部表情,这是非常不可思议的事情。”
软件R&D总监Doug Roble:“这些操作在UE4中进行是非常简单的事情。我们尝试过各种各样的架构,比如UE4、Unity、Crytek等。在我们尝试中,我们发现UE4有着更好的着色模型,有着更好的性能表现。UE4有着一个承载的平台层,所以不需要担心把它移植到其他的东西上。我们正在与Epic不断沟通,他们也在帮助我们处理大量的皮肤着色模型。比如处理头发,这些细小的细节。”
总监Darren Hendler:“我们相信很快,我们就能在未来的电影中实时达到同样的品质,我想如果我和这个角色互动,我能就能判断这个角色是否在说谎。如果能从角色的眼镜和任务的脸上察觉,那么我们就赢了。现阶段我们仍然需要去捕捉更多的微妙的表情,所以我们最感兴趣的领域之一就是这个全新的虚拟制作。我们只是刚刚开始做一些这样的设置,能够以一种更离线的方式(AI的离线学习)给出角色会是什么样的表演案例,这对他们来说是一个非常强大的工具。因为他们可以真正看到性能会是什么样子以及它将如何转换。这一切是即将到来的,重要的是让人们理解一些新技术很快就会成为可能。”
投稿/爆料:tougao@youxituoluo.com
稿件/商务合作: 六六(微信 13138755620)
加入行业交流群:六六(微信 13138755620)
元宇宙数字产业服务平台
下载「陀螺科技」APP,获取前沿深度元宇宙讯息