一种视频生成方法、装置、电子设备及存储介质

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
一种视频生成方法、装置、电子设备及存储介质
申请号:CN202510244095
申请日期:2025-03-03
公开号:CN120186428A
公开日期:2025-06-20
类型:发明专利
摘要
本发明提供一种视频生成方法、装置、电子设备及存储介质,该方法包括获取参考帧视频和待转换音频;动态提取参考帧视频中的多个图像参考帧,并输入视频生成模型,推理生成待转换音频的多个唇形生成图像;将各唇形生成图像分别与对应的图像参考帧融合,得到多个初始生成帧;高清化处理各初始生成帧,得到多个图像生成帧;检测各图像生成帧的唇形对齐偏差,确定目标参考帧,并根据目标参考帧调整视频生成模型的唇形生成参数,以使重塑的唇形对齐对应的音频数据帧,生成目标视频;本申请通过高清化处理初始生成帧可提升视觉显示效果,以适配高清显示需求,并通过目标参考帧反向调整唇形生成参数后重塑唇形,减少了唇形不协调对视频质量的影响。
技术关键词
视频生成方法 生成帧 视频生成模型 图像 生成参数 音频 电子设备 偏差 视频生成装置 对齐模块 动态 语音 高清 计算机 数据 处理器 存储装置 可读存储介质 音视频
系统为您推荐了相关专利信息
位置推定装置 轮廓形状 位置推定方法 多元回归模型 计算机程序产品
列车车厢 多组图像数据 货运 起重机 光学检测设备
监测算法 矩阵 变电站 坐标 场景
分布式架构 融合特征 管理系统 声学传感器 模型更新
散射校正方法 残差模块 蒙特卡罗 迁移学习策略 解码器