一种元宇宙和直播中数字人的动作和面部表情的控制方法

您所在的位置:网站首页 人脸动作捕捉github 一种元宇宙和直播中数字人的动作和面部表情的控制方法

一种元宇宙和直播中数字人的动作和面部表情的控制方法

2023-04-22 01:38| 来源: 网络整理| 查看: 265

申请/专利权人:北京一目视界科技有限公司

申请日:2022-08-24

公开(公告)日:2023-04-04

公开(公告)号:CN115914660A

主分类号:H04N21/2187

分类号:H04N21/2187;H04N21/472;H04N21/81;G06V40/20;G06V40/16

优先权:

专利状态码:在审-公开

法律状态:2023.04.04#公开

摘要:本发明提供了一种元宇宙和直播中数字人的动作和面部表情的控制方法,包括两部分组成,第一部分是动作捕捉和人脸捕捉系统,第二部分是数据传输系统及解析展现系统,其中所述动作捕捉系统得到每个个体的每帧相对于根节点的姿态估计,然后应用运动骨架拟合并有设置关节点角度限制项、时序平滑项来完成算法的改进,最终得到3D数据,所述人脸捕捉系统模拟面部肌肉群的联合激活效应,再通过LiveLink,将Iphone和UE5连接,UE5用C++编写服务器并且集成到应用,通过Socket接收上述3D姿势数据,利用C++和蓝图根据传入的姿态信息控制UE5中的数字人的位置和姿态;本发明降低了动作捕捉的成本,对环境无苛刻的要求,不用花费时间成本搭建场地,即可实现动作捕捉。

主权项:1.一种元宇宙和直播中数字人的动作和面部表情的控制方法,其特征在于,包括动作捕捉和面部捕捉,再使用最新的UE5作为渲染的载体,用C++编写服务器并且集成到应用,通过Socket接收上述3D姿势及动作数据,利用C++和蓝图根据传入的姿态信息控制UE5中的数字人的位置和姿态,既全身各个部位所在于三维空间中的位置,再制作动画蓝图,融合肢体动作和面部表情,其中3D姿势及动作数据是指通过摄像头及视频获取的2D数据转化后的3D数据。

全文数据:

权利要求:

百度查询: 北京一目视界科技有限公司 一种元宇宙和直播中数字人的动作和面部表情的控制方法

免责声明 1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。 2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD


【本文地址】


今日新闻


推荐新闻


CopyRight 2018-2019 办公设备维修网 版权所有 豫ICP备15022753号-3