[发明专利]众包任务的答案验证方法、装置、计算机设备及存储介质在审

专利信息
申请号: 202010135251.6 申请日: 2020-03-02
公开(公告)号: CN111460811A 公开(公告)日: 2020-07-28
发明(设计)人: 王健宗;李佳琳 申请(专利权)人: 平安科技(深圳)有限公司
主分类号: G06F40/289 分类号: G06F40/289;G06F40/30;G06F40/216;G06K9/62
代理公司: 深圳市世联合知识产权代理有限公司 44385 代理人: 汪琳琳
地址: 518000 广东省深圳市福田区福*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 任务 答案 验证 方法 装置 计算机 设备 存储 介质
【说明书】:

本申请公开了一种众包任务的答案验证方法、装置、计算机设备和存储介质,所述方法包括:获取目标任务对应的每个应答答案作为初始答案,对每个初始答案进行语义识别,根据语义识别结果确定若干参考答案,并确定每类参考答案的可信度值,在可信度值达不到预设标准值对比时,通过预设模型获取目标任务对应模拟答案,统计参考答案与模拟答案的相似度值,选取数值最大的相似度值,将数值最大的相似度值对应的参考答案作为目标答案,将目标答案对应的应答答案确认为验证通过的应答答案。本申请能够提高众包任务的答案验证准确性和效率。

技术领域

本申请涉及数据处理技术领域,尤其涉及众包任务的答案验证方法、装置、计算机设备及存储介质。

背景技术

随着网络技术的飞速发展,一些公司或者机构为了获取更多创意信息,或者高效便捷解决一些跨领域问题,往往会通过互联网向互联网对象发放众包任务,通过众包任务的方式,来解决这些问题,众包任务是指将内部执行的工作任务,分发给外部执行对象去完成以便缩短任务完成时间。

由于不同的执行对象,其学习方式和实现逻辑的不同,因而,不同执行对象对同一任务的执行结果不一样,同时,由于执行对象具有学习能力,无法直接确定哪些执行对象提供的应答答案一定优于其他执行对象,应答答案也无法进行验证。在当前,为确保得到准确的任务答案,一般是将一个众包任务分发给多个执行对象,进而获取每个执行对象的应答答案,再通过人工筛选的方式,进行应答答案的验证,这种方式使得对于众包任务的答案验证准确性较低,且答案验证效率低,如何提高众包任务的答案验证效率,成了一个亟待解决的难题。

发明内容

本申请实施例的目的在于提出一种众包任务的答案验证方法,解决现有技术人工验证众包任务的方式答案验证效率低的问题。

为了解决上述技术问题,本申请实施例提供一种众包任务的答案验证方法,包括:

从客户端获取的所有应答答案中,获取目标任务对应的每个应答答案,作为初始答案,其中,每个所述应答答案对应一个应答对象;

通过自然语言语义识别的方式,对每个所述初始答案进行语义识别,得到N个初始答案的语义识别结果,其中,N为所述应答对象的数量,N为正整数;

将所述语义识别结果两两组合,并将每个组合作为一组结果,采用相似度计算的方式,统计每组结果中所述语义识别结果之间的相似度值,若得到的相似度值大于预设相似度阈值,则将所述组别中的两个语义识别结果作为同一类参考答案,得到M类参考答案,其中,M≤N,且N为正整数;

通过预设的一致性校验方式,确定每类所述参考答案的可信度值;

从所有的所述参考答案的可信度值中,选取数值最大的可信度值,作为最大可信度值,并将所述最大可信度值与预设标准值对比,得到对比结果;

若所述对比结果为所述最大可信度值大于或等于所述预设标准值,则将所述最大可信度值对应的所述参考答案作为目标答案,并将所述目标答案对应的应答答案确认为验证通过的应答答案。

进一步的,所述通过自然语言语义识别的方式,对每个所述初始答案进行语义识别,得到N个初始答案的语义识别结果包括:

通过预设的分词方式,对所述初始答案进行分词处理,得到所述初始答案中包含的基础分词;

将所述基础分词转换为词向量,并通过聚类算法,对所述词向量进行聚类,得到每个所述词向量对应的聚类中心;

获取每个所述词向量对应的聚类中心对应的预设语义,作为所述初始答案的语义识别结果。

进一步的,所述通过预设的分词方式,对所述初始答案进行分词处理,得到所述初始答案中包含的基础分词包括:

对所述基础语句进行分词解析,得到K个分词序列;

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202010135251.6/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top