[发明专利]一种城市大脑应用场景数据规范化管理方法、系统及设备

说明书

本发明涉及一种城市大脑应用场景数据规范化管理方法、系统及设备，该方法包括：响应于接收到第三方厂商的上传请求，对第三方厂商上传的AI模型进行自动校验，确定所述AI模型的分类属性；采用所述分类属性对应的评测数据和评测指标对所述AI模型进行评测；根据评测结果生成评测报告。本发明对AI模型提供了规范化、标准化的管理方法，提高了AI评测流程的执行效率。

技术领域

本发明涉及数据管理和人工智能领域，具体涉及一种城市大脑应用场景数据规范化管理方法、系统及设备。

背景技术

数据管理是利用计算机硬件和软件技术对数据进行有效的收集、存储、处理和应用的过程，其目的是充分有效地发挥数据的作用。随着计算机技术的发展，数据管理经历了人工管理、文件系统、数据库系统三个发展阶段。用数据库系统来管理数据比文件系统具有明显的优点，在数据库系统中所建立的数据结构，便于数据修改、更新与扩充，同时保证了数据的独立性、可靠、安全性与完整性。但是，随着人工智能时代的到来，数据应用范围越来越广泛，传统的数据管理方法在AI模型相关的评测标注数据、评测指标、AI模型评测规则等的规范化管理上还没有形成统一的标准。

发明内容

为克服相关技术中存在的问题，本公开提供一种城市大脑应用场景数据规范化管理方法、系统及设备，面向三方厂商，要接入新的AI算法时，对其提供的模型进行自动校验，并利用其对应的评测数据，实现AI模型的标准化评测，解决了AI模型相关数据管理不规范的问题，达到了AI模型相关的评测标注数据、评测指标、AI模型评测规则等的标准化管理。。

根据本公开实施例的第一方面，提供一种城市大脑应用场景数据规范化管理方法，包括：

响应于接收到第三方厂商的上传请求，对第三方厂商上传的AI模型进行自动校验，确定所述AI模型的分类属性；

采用所述分类属性对应的评测数据和评测指标对所述AI模型进行评测；

根据评测结果生成评测报告。

根据本公开实施例的第二方面，提供一种城市大脑应用场景数据规范化管理系统，包括：

模型校验模块，用于响应于接收到第三方厂商的上传请求，对第三方厂商上传的AI模型进行自动校验，确定所述AI模型的分类属性；

模型评测模块，用于采用所述分类属性对应的评测数据和评测指标对所述AI模型进行评测；

报告生成模块，用于根据评测结果生成评测报告。

根据本公开实施例的第三方面，提供一种终端设备，包括：

处理器；以及

存储器，其上存储有可执行代码，当所述可执行代码被所述处理器执行时，使所述处理器执行如上所述的方法。

根据本公开实施例的第四方面，提供一种非暂时性机器可读存储介质，其上存储有可执行代码，当所述可执行代码被电子设备的处理器执行时，使所述处理器执行如上所述的方法。

本公开的实施例提供的技术方案可以包括以下有益效果：对AI模型提供了规范化、标准化的管理方法，提高了AI评测流程的执行效率。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。

附图说明

通过结合附图对本公开示例性实施方式进行更详细的描述，本公开的上述以及其它目的、特征和优势将变得更加明显，其中，在本公开示例性实施方式中，相同的参考标号通常代表相同部件。

图1是根据本公开一示例性实施例示出的一种城市大脑应用场景数据规范化管理方法的流程示意图；