[发明专利]一种无监督的英文写作切题评估方法及其系统和设备

说明书

本发明公开一种无监督的英文写作切题评估方法，包括如下步骤：人工输入参考关键词，或通过Text Rank算法从输入的范文中获取参考关键词；通过Text Rank算法从待评估作文中获取作文关键词；使用BERT预训练模型将参考关键词和作文关键词均转为词向量；利用余弦相似度计算参考关键词和作文关键词间的相似度；获得参考关键词与作文关键词间最大相似度，计算平均相似度，映射成切题分数。通过本发明的方法无需标注训练语料，高效快捷；同时相较于仅凭文本是否存在关键词判断切题与否的方法，本方法通过双向提取关键词的方式有效地避免误判和漏判，并通过计算计算语义相似度的方式，进一步确保切题评价的准确度。

技术领域

本发明属于数据处理技术领域，具体的是涉及一种自动评估英文写作的切题评估方法。

背景技术

在英文写作考试或者比赛中，要对学生英语作文进行全面的评估，除了需要对拼写、语法、可读性等语言层面评估外，还需要对作文的切题程度进行评估打分，打分的结果会做为一个重要的指标反馈到考生的写作成绩中。

传统的人工阅卷方式准确虽然高，但效率低下，尤其是面对大型的英语考试时，人工阅卷严重拖慢了批改效率。针对这一情况，目前也有一些通过计算机进行辅助阅卷评估英文写作切题程度的方法，预先设定一定的关键字，然后计算机扫描英文写作，计算该写作中与预先设定的关键字之间的关联度，关联度越高，作文越切题。但这种方法需要预先向计算机中输入关键词，人工干预仍然占据主导，评估结果的准确度依赖于关键的准确度与完整度，这就会导致在评估中容易出现关键词误判和漏判的可能性。

发明内容

发明目的：本发明目的在于针对现有技术的不足，提供一种无监督的英文写作切题评估方法，无需标注训练语料的同时，有效地避免误判和漏判。

技术方案：本发明所述无监督的英文写作切题评估方法，包括如下步骤：

S1、人工输入参考关键词，或通过TextRank算法从输入的范文中获取参考关键词；通过TextRank算法从待评估作文中获取作文关键词；

S2、使用BERT预训练模型将参考关键词和作文关键词均转为词向量；

S3、利用余弦相似度计算参考关键词和作文关键词间的相似度；

S4、获得参考关键词与作文关键词间最大相似度，计算平均相似度，映射成切题分数。

本发明进一步优选地技术方案为，步骤S1中通过Text Rank算法获取参考关键词或作文关键词的具体方法为：

S11、对用户提供的范文或待评估作文进行分词，剔除停用词，建立基于范文或待评估作文的词表；

S12、以单词作为节点，单词之间的共现频次作为边权重，建立有向图，设置共现窗口长度为5个单词，对于任意连续5个单词，这5个单词之间视为共现；

S13、初始化单词节点分数为N为词表大小，根据公式(1)更新每个单词节点的分数，直至分数收敛；

其中，score_i是第i个单词节点分数，score_j是第j个单词节点分数；IN(i)为节点i的所有入边的节点集合，节点i的入边是指边从其他节点出发，指向节点i；节点j从属于IN(i)；w_ji为节点j到节点i的入边权重，即共现频次；OUT(j)是节点j的所有出边的节点集合，节点j的出边是指从节点j出发，指向其他节点，节点k从属于OUT(j)，w_jk为节点j到节点k的出边权重；d是平滑系数，取0.8，用于避免分数为0；

S14、对所有单词节点根据分数进行降序排列，选取前若干个单词作为关键词，如果关键词相邻，则合并为关键词组。

作为优选地，步骤S2中将参考关键词或作文关键词均转为词向量的方法为：