基于高斯泼溅与3DMM模型的单目视频人脸重建与驱动方法

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
基于高斯泼溅与3DMM模型的单目视频人脸重建与驱动方法
申请号:CN202510009909
申请日期:2025-01-03
公开号:CN119399415B
公开日期:2025-03-18
类型:发明专利
摘要
本发明公开了基于高斯泼溅与3DMM模型的单目视频人脸重建与驱动方法,包括如下步骤:S1、基于3DMM模型将人脸RGB视频的每一帧转化为显式表示的人脸网格;S2、构建几何增强模块,采用改进的迭代最近点算法对眼睛和牙齿区域进行几何对齐;S3、初始化3D高斯球,根据人脸网格在不同表情下的点变化驱动3D高斯球的动态变化;S4、基于不同面部区域的特性,分配自适应优化的学习策略系数;S5、为每个3D高斯球增加置信度信息,通过渲染生成置信度图像并与渲染图像相乘,与输入图像计算高维特征相似性,优化3D高斯球的属性参数和渲染效果。本发明结合高斯泼溅与3DMM模型,实现了单目视频人脸高精度重建与驱动。
技术关键词
人脸网格 关键点 驱动方法 面部 图像 感知损失函数 球谐系数 透明度 视频 相机外参 语义 眼睛 矩阵 误差 定义 动态更新 标签