[发明专利]一种基于blendshape的数字人驱动系统

权利要求书

1.一种基于blendshape的数字人驱动系统，其特征在于，包括网络接收模块、服务解析模块、数字人驱动模块、状态检测模块和视频流传输模块，

所述网络接收模块，通过websocket建立长连接，接收用户发送过来的网络数据，并将每一帧网络数据存储到原始数据队列中；所述网络数据包括音频数据和视频数据；

所述服务解析模块，采用独立线程解析网络数据，将网络数据转换成对应数字人的结构体数据，并将结构体数据放入帧序列队列中；

所述数字人驱动模块，在虚幻引擎中的每一次主循环中，从帧序列队列中取走第一帧，然后设置给虚幻引擎的骨骼网格提对象的对应通道的blendshape上面；

所述状态检测模块，当用户有数据的时候数字人进入listen状态，当用户输入结束数字人进入talk状态，当用户结束会话时候进入idle状态，此时通过http向用户传递一个状态信息；

所述视频流传输模块，通过网页即时通信将虚幻引擎渲染的画面流入网页即时通信代理服务器中，该服务器将视频流数据解析后显示在网页浏览器上。

2.根据权利要求1所述的一种基于blendshape的数字人驱动系统，其特征在于，所述网络数据中的音频数据通过BASE64解码方式转换为WAV/RAW数据。

3.根据权利要求1所述的一种基于blendshape的数字人驱动系统，其特征在于，将所述从帧序列队列中取走第一帧的音频数据设置给soundprocedure对象完成音画对齐。

4.根据权利要求1所述的一种基于blendshape的数字人驱动系统，其特征在于，所述网络数据为json数据格式。