概述

项目关键技术内容：1）通过一个普通摄像头或者深度摄像头kinect识别人物上半身。单一人物坐着，在画面中出现上半身。单一摄像头在不进行预先定位校准的情况下识别出人物的身体动作姿态，预估上臂的大臂小臂的轴向。在高清摄像头和光线照度比较好的情况下，可以识别手指；2）通过多个普通摄像头或者深度摄像头kinect，预先进行校准和定位下，对全身的定位精准，而且在舞蹈等高速运动过程中不丢帧，身体识别连贯；3）通过普通摄像头对应坐着屏幕前的人物，进行人脸表情动作识别，匹配apple ARKit的Blendshape3）智能化虚拟人动作表情与语音语义的协调机制。 所需达到的技术目标：动态自定义人脸及身体网格体，且能达到实时驱动的效果；人脸识别采样支持blendshape和apple ARkit；打通任意毛发的Groom模拟系统，不再受限于建模软件；情绪化模拟模块神态和微表情数量由30种提升至200种。