[发明专利]一种机器学习方法及系统

摘要

本发明公开了一种机器学习方法及装置，其中，该方法包括：数据处理服务器将Spark数据处理算法及对应的待处理数据发送至FPGA异构加速计算装置，Spark数据处理算法为由Spark提供的数据处理算法；FPGA异构加速计算装置获取由FPGA算法库提供的与Spark数据处理算法对应的FPGA数据处理算法，并利用FPGA数据处理算法对待处理数据进行处理。由此，利用FPGA数据处理算法实现对于待处理数据的处理；而FPGA数据处理算法均为计算速度较Spark数据处理算法更快的数据处理算法，因此，缩短了大数据处理周期，提升了Spark机器学习性能。

主权项

1.一种机器学习方法，其特征在于，包括：数据处理服务器将Spark数据处理算法及对应的待处理数据发送至FPGA异构加速计算装置，其中，所述Spark数据处理算法为由Spark提供的数据处理算法；所述FPGA异构加速计算装置获取由FPGA算法库提供的与所述Spark数据处理算法对应的FPGA数据处理算法，并利用所述FPGA数据处理算法对所述待处理数据进行处理；所述数据处理服务器将所述待处理数据发送至所述FPGA异构加速计算装置，包括：判断所述FPGA异构加速计算装置的内存是否大于或等于所述待处理数据，如果是，则将所述待处理数据发送至所述FPGA异构加速计算装置，如果否，则将所述待处理数据分割成小于或等于所述FPGA异构加速计算装置的内存的待处理数据块，再依次发送至所述FPGA异构加速计算装置。