[发明专利]基于数字人的汉语到手语的翻译方法及系统

权利要求书

1.一种基于数字人的汉语到手语的翻译方法，其特征在于，包括以下步骤：

启动翻译页面，其中，所述翻译页面包括数据输入区域和数字人展示区域；

在所述数据输入区域中获取待翻译的数据，并从所述待翻译的数据中识别出中文文本数据；

将所述中文文本数据输入至手语机器翻译模型，获取所述手语机器翻译模型输出的手语词序列；

基于所述手语词序列驱动手语数字人，控制所述手语数字人在所述数字人展示区域展示与所述手语词序列对应的手语动作。

2.根据权利要求1所述的翻译方法，其特征在于，所述待翻译的数据，包括：文本数据、音频数据和视频数据，所述从所述待翻译的数据中识别出中文文本数据，包括：

在所述待翻译的数据为中文文本数据的情况下，直接获取在所述数据输入区域中输入的中文文本数据；

在所述待翻译的数据为通过麦克风接收的用户的实时音频数据的情况下，通过第三方应用的API接口对所述实时音频数据进行语音识别，获取转换出的中文文本数据；

在所述待翻译的数据为视频数据的情况下，从所述视频数据中抽取出对应的目标音频数据，并通过所述第三方应用的API接口对所述目标音频数据进行语音识别，获取转换出的中文文本数据。

3.根据权利要求1所述的翻译方法，其特征在于，在所述将所述中文文本数据输入至手语机器翻译模型之前，还包括：

将所述中文文本数据按照预设的规范格式进行调整；

分析所述中文文本数据中是否存在错误，并修正检测出的错误，其中，所述错误包括错别字、语义冗余、语义缺失和无具体含义的词语；

提取修正后的中文文本数据中的命名实体，并对所述修正后的中文文本数据进行情感分析，获取所述修正后的中文文本数据中的情感信息。

4.根据权利要求3所述的翻译方法，其特征在于，在所述将所述中文文本数据输入至手语机器翻译模型之前，还包括：

针对所述修正后的中文文本数据选择对应的目标手语机器翻译模型；

向所述目标手语机器翻译模型中传输翻译控制参数，其中，所述翻译控制参数包括文本精简比率参数和文本长度控制参数。

5.根据权利要求1所述的翻译方法，其特征在于，在所述基于所述手语词序列驱动手语数字人之前，还包括：

向审核人员展示所述手语机器翻译模型输出的手语词序列，并获取所述审核人员返回的人工审核结果，根据所述人工审核结果对所述手语词序列进行修改。

6.根据权利要求1所述的翻译方法，其特征在于，所述数字人展示区域包括多个调整控件，所述控制所述手语数字人在所述数字人展示区域展示与所述手语词序列对应的手语动作，包括：

基于所述多个调整控件接收用户输入的调整指令，并根据所述调整指令对所述手语数字人的形象、服装和背景进行调整。

7.根据权利要求3所述的翻译方法，其特征在于，所述控制所述手语数字人在所述数字人展示区域展示与所述手语词序列对应的手语动作，还包括：

根据所述情感信息生成对应的表情数据；

将所述表情数据传输至所述手语数字人，控制所述手语数字人按照所述表情数据显示相应的表情。

8.一种基于数字人的汉语到手语的翻译系统，其特征在于，包括以下模块：

启动模块，用于启动翻译页面，其中，所述翻译页面包括数据输入区域和数字人展示区域；

识别模块，用于在所述数据输入区域中获取待翻译的数据，并从所述待翻译的数据中识别出中文文本数据；

翻译模块，用于将所述中文文本数据输入至手语机器翻译模型，获取所述手语机器翻译模型输出的手语词序列；

展示模块，用于基于所述手语词序列驱动手语数字人，控制所述手语数字人在所述数字人展示区域展示与所述手语词序列对应的手语动作。