[发明专利]一种数据回流的方法和装置

说明书

本发明公开了一种数据回流的方法和装置，涉及人工智能技术领域。数据回流的方法的一具体实施方式包括：响应于接收到模型服务请求，获取所述模型服务请求包括的请求数据，根据所述请求数据的数据格式对所述请求数据进行分类存储；根据所述模型服务请求确定对应的目标模型服务，将所述请求数据发送至所述目标模型服务，以使所述目标模型服务处理所述请求数据并返回模型服务响应；响应于接收到所述目标模型服务返回的模型服务响应，获取所述模型服务响应包括的响应数据，根据所述响应数据的数据格式对所述响应数据进行分类存储。该实施方式能够提高请求数据和响应数据的数据回流效率，便于请求数据和响应数据的后续调用。

技术领域

本发明涉及人工智能技术领域，尤其涉及一种数据回流的方法和装置。

背景技术

在AI模型的使用过程中，需要输入大量请求数据，也会得到大量响应数据。这些数据很重要，通过对这些数据进行重复标注和训练，能够提高模型的泛化能力、减少数据特征漂移的情况。在重复标注和训练之前，需要对这些数据进行转储，即数据回流。在数据回流时，通常会将请求数据和响应数据合并存储，将请求数据和响应数据包括的图片转换为字符串，再统一存储至数据库。

在实现本发明过程中，发明人发现现有技术中至少存在如下问题：

各种类型的数据统一存储，导致数据回流的效率低，不利于后续调用。

发明内容

有鉴于此，本发明实施例提供一种数据回流的方法和装置，能够提高请求数据和响应数据的数据回流效率，便于请求数据和响应数据的后续调用。

为实现上述目的，根据本发明实施例的第一方面，提供了一种数据回流的方法，包括：

响应于接收到模型服务请求，获取所述模型服务请求包括的请求数据，根据所述请求数据的数据格式对所述请求数据进行分类存储；

根据所述模型服务请求确定对应的目标模型服务，将所述请求数据发送至所述目标模型服务，以使所述目标模型服务处理所述请求数据并返回模型服务响应；

响应于接收到所述目标模型服务返回的模型服务响应，获取所述模型服务响应包括的响应数据，根据所述响应数据的数据格式对所述响应数据进行分类存储。

可选地，根据所述请求数据的数据格式对所述请求数据进行分类存储，包括：

在所述请求数据的数据格式指示所述请求数据为结构化数据的情况下，将所述请求数据经过消息队列存储至搜索引擎。

可选地，在将所述请求数据经过消息队列存储至搜索引擎之前，所述方法还包括：

根据预先设置的映射封装规则，对所述请求数据进行映射和封装。

可选地，将所述请求数据经过消息队列存储至搜索引擎，包括：

根据所述模型服务请求确定对应的目标消息队列，将所述请求数据推送至所述目标消息队列；

使用定时任务将所述目标消息队列包括的请求数据存储至所述搜索引擎。

可选地，根据所述请求数据的数据格式对所述请求数据进行分类存储，包括：

在所述请求数据的数据格式指示所述请求数据为非结构化数据的情况下，将所述请求数据存储至分布式文件存储。

可选地，所述请求数据包括请求标识；将所述请求数据存储至分布式文件存储，包括：

根据所述请求标识确定所述请求数据在所述分布式文件存储中的存储路径；

使用所述请求标识对所述存储路径指示的存储空间命名；

将所述请求数据存储至所述存储路径指示的所述存储空间。