[发明专利]一种嵌入式模型SDK开发方法和开发平台

说明书

本发明提供了一种嵌入式模型SDK开发方法和开发平台，所述方法包括：检测到开发模型的更新后，根据更新后的所述开发侧模拟流水线得到所述预设原始数据的模拟裸数据和模拟精度指标；拉取业务侧模型流水线的SDK包得到所述预设原始数据的模型裸数据和模型精度指标；分别进行对分；检测到SDK代码更新后，更新所述SDK包，并进行冒烟测试；检测到定版请求后，进行全量测试，通过后交付。这样，对于双方的人员来说，在对本侧的流水线理解上不会存在理解偏差，通过一一对应的裸数据，来判断出问题的环节或位置；另外，每次都可以对新版本的开发模型直接进行测试，从而将问题分散开来，便于双方的人员进行查找。

技术领域

本发明涉及嵌入式模型开发技术领域，具体而言，涉及一种嵌入式模型SDK开发方法和开发平台。

背景技术

嵌入式模型SDK的一般发版流程为：先训练各种大模型，比如检测模型、识别模型、活体模型、属性模型等，在大模型上做精度评测并蒸馏量化小模型，将小模型交付各业务线比如安防线，通行线，交通线等，各业务线根据自身业务场景开发模型流水线并封装成端上SDK，基于端上SDK开发测试程序验证端上SDK的质量、性能和精度，最后交付端上SDK给下游整机应用开发商。

但是这种发版流程中，从大模型到端上SDK，中间环节比较多，每个环节都可能引来误差，会经常导致单模型评测涨点，但集成到SDK后无增益甚至掉点的情况；由于SDK测试是整个链条中最后一环，往往问题会在这个环节集中暴露，此时再去重新修改模型，往往会浪费大量时间，使得整个发版流程效率很低。

发明内容

本发明解决的问题是发版流程效率过低。

为解决上述问题，本发明首先提供一种嵌入式模型SDK开发方法，其包括：

检测到开发模型的更新后，根据所述开发模型更新已搭建好的开发侧模拟流水线；其中，所述开发侧模拟流水线的运行环境与所述开发模型的开发环境相匹配；

根据更新后的所述开发侧模拟流水线对预设原始数据进行处理，得到所述预设原始数据的模拟裸数据和模拟精度指标；

拉取业务侧模型流水线的SDK包并根据更新后的所述开发模型对所述SDK包进行更新；其中，所述业务侧模型流水线和所述开发侧模拟流水线所包含的所述开发模型、所述开发模型之间的数据流转逻辑相同；

根据更新后的所述SDK包对预设原始数据进行处理，得到所述预设原始数据的模型裸数据和模型精度指标；

将所述模型裸数据和所述模拟裸数据、所述模型精度指标和所述模拟精度指标分别进行对分；

检测到SDK代码更新后，根据所述SDK代码和所述开发模型更新所述业务侧模型流水线的所述SDK包，并对更新后的所述SDK包进行冒烟测试；

检测到所述开发模型和所述SDK包的定版请求后，对当前的所述开发模型和当前的所述SDK包进行全量测试，所述全量测试通过后交付所述SDK包。

这样，业务侧模型流水线是根据业务侧的技术栈编译成的，开发侧模拟流水线是根据开发侧的技术栈编译成的，对于双方的人员来说，在对本侧的流水线理解上不会存在因为技术栈不同导致的理解偏差，通过生成一一对应的裸数据，可以将相同的问题展示给双方的人员，供双方的人员来判断出问题的环节或位置；另外，每次都可以对新版本的开发模型或SDK代码直接进行测试，而不需要再等到统一封装之后再集中检测，从而将可能暴露的问题分散开来，便于双方的人员进行查找。

这样，减少了中间的手动操作环节，增加了执行效率；且通过不同的技术栈进行分别进行对应的封装，避免了不同技术栈给双方的人员造成的理解偏差，提高了缺陷找寻的效率，避免了时间浪费。

可选的，所述根据更新后的所述开发侧模拟流水线对预设原始数据进行处理，得到所述预设原始数据的模拟裸数据和模拟精度指标，包括：

读取所述预设原始数据；