[发明专利]众包任务的答案验证方法、装置、计算机设备及存储介质在审
申请号: | 202010135251.6 | 申请日: | 2020-03-02 |
公开(公告)号: | CN111460811A | 公开(公告)日: | 2020-07-28 |
发明(设计)人: | 王健宗;李佳琳 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G06F40/289 | 分类号: | G06F40/289;G06F40/30;G06F40/216;G06K9/62 |
代理公司: | 深圳市世联合知识产权代理有限公司 44385 | 代理人: | 汪琳琳 |
地址: | 518000 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 任务 答案 验证 方法 装置 计算机 设备 存储 介质 | ||
本申请公开了一种众包任务的答案验证方法、装置、计算机设备和存储介质,所述方法包括:获取目标任务对应的每个应答答案作为初始答案,对每个初始答案进行语义识别,根据语义识别结果确定若干参考答案,并确定每类参考答案的可信度值,在可信度值达不到预设标准值对比时,通过预设模型获取目标任务对应模拟答案,统计参考答案与模拟答案的相似度值,选取数值最大的相似度值,将数值最大的相似度值对应的参考答案作为目标答案,将目标答案对应的应答答案确认为验证通过的应答答案。本申请能够提高众包任务的答案验证准确性和效率。
技术领域
本申请涉及数据处理技术领域,尤其涉及众包任务的答案验证方法、装置、计算机设备及存储介质。
背景技术
随着网络技术的飞速发展,一些公司或者机构为了获取更多创意信息,或者高效便捷解决一些跨领域问题,往往会通过互联网向互联网对象发放众包任务,通过众包任务的方式,来解决这些问题,众包任务是指将内部执行的工作任务,分发给外部执行对象去完成以便缩短任务完成时间。
由于不同的执行对象,其学习方式和实现逻辑的不同,因而,不同执行对象对同一任务的执行结果不一样,同时,由于执行对象具有学习能力,无法直接确定哪些执行对象提供的应答答案一定优于其他执行对象,应答答案也无法进行验证。在当前,为确保得到准确的任务答案,一般是将一个众包任务分发给多个执行对象,进而获取每个执行对象的应答答案,再通过人工筛选的方式,进行应答答案的验证,这种方式使得对于众包任务的答案验证准确性较低,且答案验证效率低,如何提高众包任务的答案验证效率,成了一个亟待解决的难题。
发明内容
本申请实施例的目的在于提出一种众包任务的答案验证方法,解决现有技术人工验证众包任务的方式答案验证效率低的问题。
为了解决上述技术问题,本申请实施例提供一种众包任务的答案验证方法,包括:
从客户端获取的所有应答答案中,获取目标任务对应的每个应答答案,作为初始答案,其中,每个所述应答答案对应一个应答对象;
通过自然语言语义识别的方式,对每个所述初始答案进行语义识别,得到N个初始答案的语义识别结果,其中,N为所述应答对象的数量,N为正整数;
将所述语义识别结果两两组合,并将每个组合作为一组结果,采用相似度计算的方式,统计每组结果中所述语义识别结果之间的相似度值,若得到的相似度值大于预设相似度阈值,则将所述组别中的两个语义识别结果作为同一类参考答案,得到M类参考答案,其中,M≤N,且N为正整数;
通过预设的一致性校验方式,确定每类所述参考答案的可信度值;
从所有的所述参考答案的可信度值中,选取数值最大的可信度值,作为最大可信度值,并将所述最大可信度值与预设标准值对比,得到对比结果;
若所述对比结果为所述最大可信度值大于或等于所述预设标准值,则将所述最大可信度值对应的所述参考答案作为目标答案,并将所述目标答案对应的应答答案确认为验证通过的应答答案。
进一步的,所述通过自然语言语义识别的方式,对每个所述初始答案进行语义识别,得到N个初始答案的语义识别结果包括:
通过预设的分词方式,对所述初始答案进行分词处理,得到所述初始答案中包含的基础分词;
将所述基础分词转换为词向量,并通过聚类算法,对所述词向量进行聚类,得到每个所述词向量对应的聚类中心;
获取每个所述词向量对应的聚类中心对应的预设语义,作为所述初始答案的语义识别结果。
进一步的,所述通过预设的分词方式,对所述初始答案进行分词处理,得到所述初始答案中包含的基础分词包括:
对所述基础语句进行分词解析,得到K个分词序列;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010135251.6/2.html,转载请声明来源钻瓜专利网。