手语生成方法、装置、电子设备、存储介质及产品

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
手语生成方法、装置、电子设备、存储介质及产品
申请号:CN202411485954
申请日期:2024-10-23
公开号:CN119418714B
公开日期:2025-12-05
类型:发明专利
摘要
本申请提出一种手语生成方法、装置、电子设备、存储介质及产品,该方法对说话人的语音音频中的每帧音频帧进行情感分类,确定语音音频对应的情感特征序列;基于语音音频和情感特征序列,对说话人动作图片帧中的说话人面部动作和手部动作进行调整,生成语音音频对应的说话人手语动作图片序列。采用本申请的技术方案,能够将语音音频结合语音音频的情感特征对说话人动作图片帧中的说话人面部动作和手部动作进行调整,使得说话人的手语动作和面部表情具有情感特征,提高了手语生成的情感度。另外,说话人手语动作图片序列中的说话人面部动作和手部动作的风格与听障人士的手语表达风格相同,提高了手语生成的准确度,更方便听障人士的理解。
技术关键词
手语 情感特征 音频 光流特征 图片 语音 样本 序列 生成方法 身份 生成算法 编码器 计算机程序指令 风格 面部识别 处理器 电子设备 视频帧
系统为您推荐了相关专利信息
功能模块 语音 播报方法 GNSS天线 5G天线
手语 动作特征 交互方法 意图 序列
原型 语义 识别方法 样本 视觉特征编码
识别方法 直方图均衡化 采集电缆 高斯金字塔 协方差矩阵
深度学习模型 识别方法 构建卷积神经网络 样本 数据