[发明专利]手势通信方法、装置、存储介质及电子装置

权利要求书

1.一种手势通信方法，其特征在于，包括：

在第一终端和第二终端进行视频通话或音频通话时，获取所述第一终端或所述第二终端发送的第一请求，其中，所述第一请求用于请求创建手势识别服务，其中，所述手势识别服务用于对所述第一终端采集到的视频帧中识别出的手势进行语义识别；

响应于所述第一请求，创建所述手势识别服务；

在所述视频通话或音频通话中，获取所述第一终端采集的一组视频帧中识别出的一组手势；

通过所述手势识别服务，对所述第一终端采集的一组视频帧中识别出的一组手势进行语义识别，得到所述一组手势所表示的目标语义；

将所述目标语义发送给所述第二终端；

所述方法还包括：获取所述第一终端或所述第二终端发送的第二请求，其中，所述第二请求用于请求创建目标数据通道；响应于所述第二请求，创建所述目标数据通道，其中，所述目标数据通道为所述第一终端或所述第二终端允许使用的通道；

所述获取所述第一终端或所述第二终端发送的第一请求，包括：获取所述第一终端或所述第二终端在所述目标数据通道上传输的所述第一请求；

其中，在所述第一终端支持使用所述目标数据通道的情况下，所述方法还包括：将所述第二终端的语音帧转换成手势流和/或目标文字流并通过所述目标数据通道发送给所述第一终端。

2.根据权利要求1所述的方法，其特征在于，

所述获取所述第一终端或所述第二终端发送的第二请求，包括：获取所述第一终端或所述第二终端通过接入控制实体SBC/P-CSCF、会话控制实体I/S-CSCF以及服务控制节点向媒体服务器发送的所述第二请求；

所述响应于所述第二请求，创建所述目标数据通道，包括：响应于所述第二请求，通过所述媒体服务器创建所述目标数据通道，其中，所述目标数据通道用于在所述第一终端或所述第二终端与所述媒体服务器之间传输数据。

3.根据权利要求2所述的方法，其特征在于，

所述获取所述第一终端或所述第二终端在所述目标数据通道上传输的所述第一请求，包括：获取所述第一终端或所述第二终端在所述目标数据通道上向应用控制节点传输的所述第一请求；

所述响应于所述第一请求，创建所述手势识别服务，包括：由所述应用控制节点向所述服务控制节点发出第一指令，其中，所述第一指令用于指示所述服务控制节点向所述媒体服务器发出第二指令，所述第二指令用于指示所述媒体服务器创建所述手势识别服务；响应于所述第二指令，通过所述媒体服务器创建所述手势识别服务，或者，通过所述媒体服务器指示第三方服务组件创建所述手势识别服务。

4.根据权利要求1所述的方法，其特征在于，所述方法还包括：

通过服务控制节点向媒体服务器发送第三指令，其中，所述第三指令用于请求创建混合媒体服务，所述混合媒体服务用于对所述视频通话中的视频流、音频流和数据流进行处理，或者用于对所述音频通话中的音频流和数据流进行处理，所述数据流是表示所述目标语义的数据流；响应于所述第三指令，通过所述媒体服务器创建所述混合媒体服务，或者，通过所述媒体服务器指示第三方服务组件创建所述混合媒体服务。

5.根据权利要求1所述的方法，其特征在于，所述通过所述手势识别服务，对所述第一终端采集的一组视频帧中识别出的一组手势进行语义识别，得到所述一组手势所表示的目标语义，包括：

通过所述手势识别服务，对所述第一终端采集的一组视频帧中识别出的所述一组手势进行语义识别，得到一个或多个语义，其中，每个所述语义是所述一组手势中的一个或多个手势所表达的语义；

基于所述一个或多个语义，生成与所述一组手势对应的所述目标语义。

6.根据权利要求5所述的方法，其特征在于，所述将所述目标语义发送给所述第二终端，包括：

在所述目标语义是将所述一个或多个语义拼接成的语义时，将所述目标语义中包括的每个所述语义与所述一组视频帧中对应的视频帧同步发送给所述第二终端；或者，

在所述目标语义是由包括与所述一组视频帧对应的数据流表示、且所述数据流为文字流和音频流时，将所述文字流与所述一组视频帧中对应的视频帧进行同步合成，得到目标视频流；将所述目标视频流与所述音频流同步发送给所述第二终端。