[发明专利]数据访问方法、装置、设备和介质

说明书

本发明实施例公开了一种数据访问方法、装置、设备和介质。所述方法包括：从客户端获取待访问的目标数据集标识，并向服务器发送目标数据集标识，供服务器根据目标数据集标识，确定目标数据集所属的目标数据源类型、目标数据源配置信息以及目标数据集属性信息；根据目标数据源类型和目标数据源配置信息，构建目标数据源的连接信息；通过构建的目标数据源的连接信息，根据目标数据集属性信息，从目标数据源中获取目标数据集。本发明实施例实现了访问不同数据集时，无需针对不同数据集适配访问方式，以及针对不同数据集所属数据源适配连接方式，减少了基于数据集样本的模型构建的构建周期以及成本。

技术领域

本发明实施例涉及计算机技术领域，尤其涉及一种数据访问方法、装置、设备和介质。

背景技术

AI(Artificial Intelligence，人工智能)，是一种研究以及开发用于模拟、延伸和扩展人的智能的理论、方法、技术及应用系统的一门新的技术科学。在构建AI模型时，需要调用多种多样的数据集，而调用这些数据集则需要与不同的数据源进行连接，但是数据源的类型众多，包括NAS、Mysql、HDFS和块存储等等，不同类型数据源的连接方式不同，并且不同数据集的访问方式也不尽相同。

现有方法是对不同数据集的访问方式以及不同数据集所属数据源的连接方式进行单独适配，这样就大大增加了AI模型构建的构建周期以及成本。

发明内容

本发明实施例提供一种数据访问方法、装置、设备和介质，以解决访问数据集时，需要对不同数据集的访问方式以及不同数据集所属数据源的连接方式进行单独适配的问题。

第一方面，本发明实施例提供了一种数据访问方法，所述方法包括：

从客户端获取待访问的目标数据集标识，并向服务器发送所述目标数据集标识，供服务器根据所述目标数据集标识，确定目标数据集所属的目标数据源类型、目标数据源配置信息以及目标数据集属性信息；

根据所述目标数据源类型和所述目标数据源配置信息，构建所述目标数据源的连接信息；

通过构建的所述目标数据源的连接信息，根据所述目标数据集属性信息，从目标数据源中获取目标数据集。

第二方面，本发明实施例提供了一种数据访问装置，所述装置包括：

目标数据集标识发送模块，用于从客户端获取待访问的目标数据集标识，并向服务器发送所述目标数据集标识，供服务器根据所述目标数据集标识，确定目标数据集所属的目标数据源类型、目标数据源配置信息以及目标数据集属性信息；

连接信息构建模块，用于根据所述目标数据源类型和所述目标数据源配置信息，构建所述目标数据源的连接信息；

目标数据集获取模块，用于通过构建的所述目标数据源的连接信息，根据所述目标数据集属性信息，从目标数据源中获取目标数据集。

第三方面，本发明实施例提供了一种设备，所述设备包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如本发明实施例中任一所述的数据访问方法。

第四方面，本发明实施例提供了一种计算机可读介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如本发明实施例中任一所述的数据访问方法。