[发明专利]一种结合语义识别实现标识文本差异内容的方法及系统

权利要求书

1.一种结合语义识别实现标识文本差异内容的方法，其特征在于，包括：

S100：通过深度学习方法预训练相似度计算模型；

S200：通过相似度计算模型计算待对比文本的第一相似度；

S300：当所述第一相似度小于预设相似度阈值时，逐个随机剔除所述待对比文本中的分词；

S400：通过相似度计算模型计算剔除所述分词之后的所述待对比文本的第二相似度；

S500：当所述第二相似度小于所述预设相似度阈值且大于所述第一相似度时，则认为剔除有效，将所述第二相似度作为所述第一相似度，并重复执行逐个随机剔除所述待对比文本中的分词后，通过相似度计算模型计算剔除所述分词之后的所述待对比文本的第二相似度；

S600：当所述第二相似度小于所述第一相似度时，则认为剔除无效，放回被剔除的所述分词后，重复执行逐个随机剔除所述待对比文本中的分词后，通过相似度计算模型计算剔除所述分词之后的所述待对比文本的第二相似度；

S700：当所述第二相似度大于或等于所述预设相似度阈值时，标识所述待对比文本中被剔除的分词。

2.根据权利要求1所述的结合语义识别实现标识文本差异内容的方法，其特征在于，还包括：

当所述第一相似度大于或等于所述相似度阈值时，无需标识。

3.根据权利要求2所述的结合语义识别实现标识文本差异内容的方法，其特征在于，还包括：

将所述待对比文本进行分词处理。

4.一种结合语义识别实现标识文本差异内容的系统，其特征在于，包括：

第一相似度计算模块，用于通过深度学习方法预训练相似度计算模型，并通过相似度计算模型计算待对比文本的第一相似度；

分词剔除模块，用于当所述第一相似度小于预设相似度阈值时逐个随机剔除所述待对比文本中的分词；

第二相似度计算模块，用于通过相似度计算模型计算剔除所述分词之后的所述待对比文本的第二相似度；

标识模块，用于当所述第二相似度小于所述预设相似度阈值且大于所述第一相似度时，则认为剔除有效，将所述第二相似度作为所述第一相似度，并重复执行逐个随机剔除所述待对比文本中的分词后，通过相似度计算模型计算剔除所述分词之后的所述待对比文本的第二相似度；

当所述第二相似度小于所述第一相似度时，则认为剔除无效，放回被剔除的所述分词后，重复执行逐个随机剔除所述待对比文本中的分词后，通过相似度计算模型计算剔除所述分词之后的所述待对比文本的第二相似度；

当所述第二相似度大于或等于所述预设相似度阈值时标识所述待对比文本中被剔除的分词。

5.一种计算机设备，包括存储器、处理器和存储在所述存储器内并能由所述处理器运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1-3中任一项所述的方法。

6.一种计算机可读存储介质，其内存储有计算机程序，其特征在于，所述计算机程序在由处理器执行时实现如权利要求1-3中任一项所述的方法。