[发明专利]多模态智能文本处理方法、装置、电子设备及存储介质

说明书

本发明提供了一种多模态智能文本处理方法，包括：根据相应环境的噪音信息将语音指令转换为相应的可识别文本信息；获取触摸屏中选中操作；提取与所述触摸屏中所显示的文本内容相匹配的特征向量；生成与词语级的隐变量相对应的候选词语以及候选词语的被选取概率；根据所述候选词语的被选取概率以及所述可识别文本信息，选取至少一个候选词语组成与所述文本内容相对应的目标文本；在触摸屏中以与选中操作对应的显示方式，显示目标文本。本发明还提供了多模态智能文本处理装置、电子设备及存储介质。本发明能够实现在用户使用多模态环境触摸屏选择文本的过程中，能够对用户所要选择的目标文本进行预判，并输出相应的目标文本以供用户进行选择。

技术领域

本发明涉及信息处理技术，尤其涉及多模态智能文本处理方法、装置、电子设备及存储介质。

背景技术

传统技术中，在多模态环境下使用触摸屏电子设备(多模态终端或者这辆中控设备等)选择文本信息的时候，由于多模态的触摸屏可操作面积的限制和用户单手操作的习惯，用户没有时间和精力进行精确的选择，使得用户手动控制光标选择文本并不准确，经常遇到无法选择到多模态的触摸屏中理想的文本的情况，影响了用户对于文本的选择速度与选择精确度，为此，人工智能技术(AI，Artificial Intelligence)提供了适当的文本处理进程的运行机制来支持上述应用的方案。其中，人工智能是利用数字计算机或者数字计算机控制的机器模拟、延伸和扩展人的智能，感知环境、获取知识并使用知识获得最佳结果的理论、方法和技术及应用系统人工智能也就是研究各种智能机器的设计原理与实现方法，使机器具有感知、推理与决策的功能，在语音处理领域中，也就是通过利用数字计算机或者数字计算机控制的机器实现对文本信息的识别。

发明内容

有鉴于此，本发明实施例提供一种多模态智能文本处理方法、装置、电子设备及存储介质，本发明实施例的技术方案是这样实现的：

本发明实施例通过了一种多模态智能文本处理方法，包括：

获取触摸屏中选中操作对应的文本内容；

提取与所述文本内容相匹配的特征向量；

根据所述特征向量确定与所述文本内容所对应的至少一个词语级的隐变量；

根据所述至少一个词语级的隐变量，生成与所述词语级的隐变量相对应的候选词语以及所述候选词语的被选取概率；

根据所述候选词语的被选取概率以及所述可识别文本信息，选取至少一个候选词语组成与所述文本内容相对应的目标文本；

在所述触摸屏中以与所述选中操作对应的显示方式，显示所述目标文本。

上述方案中，所述方法还包括：

侦测不同用户对所述文本内容的处理结果，以及相应的操作参数；

根据对所述文本内容的处理结果，以及相应的操作参数形成与所述不同用户分别对应的历史数据索引；其中，所述历史数据索引用于对所述文本处理模型所生成的目标文本进行评价。

上述方案中，所述提取与所述触摸屏中所显示的文本内容相匹配的特征向量，包括：

对所述触摸屏中所显示的文本内容进行分词处理，形成分词处理结果；

响应于所述分词处理结果，对所述文本内容进行去停用词处理，以形成与所述文本内容相匹配的文本关键词；

根据所述文本内容相匹配的文本关键词，确定与所述文本内容相匹配的词性标注结果，并形成与所述文本内容相对应的词性特征向量集合。

上述方案中，所述根据所述候选词语的被选取概率以及所述可识别文本信息，选取至少一个候选词语组成与所述文本内容相对应的目标文本，包括：

对所述可识别文本信息与所述触摸屏中所显示的文本内容相匹配；