[发明专利]数字人视频的生成方法、装置、电子设备和存储介质在审
申请号: | 202310132741.4 | 申请日: | 2023-02-17 |
公开(公告)号: | CN116385629A | 公开(公告)日: | 2023-07-04 |
发明(设计)人: | 程平;吴松城 | 申请(专利权)人: | 厦门黑镜科技有限公司 |
主分类号: | G06T17/00 | 分类号: | G06T17/00;G06T15/00;G06V40/16;G06V10/80 |
代理公司: | 北京睿博行远知识产权代理有限公司 11297 | 代理人: | 董炜琼 |
地址: | 361000 福建省厦门市火炬高*** | 国省代码: | 福建;35 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种数字人视频的生成方法、装置、电子设备和存储介质,该方法包括:根据目标音频的时长从目标人的真实说话视频中获取多个源视频帧;对各源视频帧进行3D人脸建模,并将得到的多个第一3D人脸模型的表情参数置零,得到多个第二3D人脸模型;按各音素的时序对各第二3D人脸模型和基于各音素生成的各第三3D人脸模型进行融合,并渲染出人脸图像序列;按时序将人脸图像序列和各源视频帧进行融合,并将融合图像中的预设区域置为黑色,得到多个渲染帧;将各渲染帧输入图像转换模型,并将目标音频和图像转换模型输出的目标视频帧序列进行合成处理,得到数字人视频,从而提高了数字人视频和真实说话视频之间人脸的一致性。 | ||
搜索关键词: | 数字 视频 生成 方法 装置 电子设备 存储 介质 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于厦门黑镜科技有限公司,未经厦门黑镜科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202310132741.4/,转载请声明来源钻瓜专利网。