Meta 提交的申请一项新专利展示了可以为视频游戏和VR 应用程序带来更逼真的口型同步和面部动画的技术。通过这些更逼真的新专虚拟现实面部动作创建NPC 和为玩家化身提供更逼真和身临其境的体验,包括在VR 游戏中。优化
该专利详细介绍了将用户语音转换为逼真的口型同步和面部动画的多种方法,使开发人员可以灵活地选择使用该系统的同步方式。专利中概述的申请一种方法涉及使用多人在阅读50 个不同的语音平衡句子时的音频和视频记录数据集,系统在他们阅读每个句子时跟踪他们的新专虚拟现实面部表情。通过跟踪个人在阅读每个句子时的优化面部和嘴巴如何移动,系统可以从这些动作中提取并将它们混合在一起用来让角色的口型动画更加逼真,甚至包括眨眼和眉毛抬起等细微动作。同步
除了能够基于现有数据集生成面部动画和口型同步之外,该专利还描述了该系统如何使用集成到VR 耳机中的新专虚拟现实摄像头来做同样的事情。此功能可以让VR 用户拥有能够准确模仿自己面部表情的优化头像,从而在多人游戏和《VRchat》等社交 VR 体验中获得更加逼真和沉浸的口型体验。
同步(责任编辑:热点)
银保监会完善相关政策措施 支持符合绿色低碳发展需求的保险产品和服务
美国量化投资平台Quantopian获2500万美元C轮融资
华兰生物(002007.SZ):2020年度净利升25.69% 基本每股收益0.8873元