[发明专利]快速解析多源海洋业务化观测数据的方法在审
申请号: | 202110516907.3 | 申请日: | 2021-05-12 |
公开(公告)号: | CN113111140A | 公开(公告)日: | 2021-07-13 |
发明(设计)人: | 梁建峰;宋晓;韩璐遥;郑兵;韦广昊;杨锦坤;杨扬;耿姗姗 | 申请(专利权)人: | 国家海洋信息中心 |
主分类号: | G06F16/28 | 分类号: | G06F16/28;G06F16/25 |
代理公司: | 天津企兴智财知识产权代理有限公司 12226 | 代理人: | 马倩倩 |
地址: | 300000*** | 国省代码: | 天津;12 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 快速 解析 海洋 业务 观测 数据 方法 | ||
1.快速解析多源海洋业务化观测数据的方法,其特征在于,包括如下步骤:
S1,接收多源海洋业务化观测数据的原始数据文件,根据智能识别规则进行分类,采用构建的多驱动并行规则窗口按照分类结果分别转发到解析器的不同解析窗口;
S2,解析窗口根据配置信息解析原始数据文件,得到标准文件;
S3,对标准数据文件进行验证,批量加载存入数据库。
2.根据权利要求1所述的方法,其特征在于:在步骤S1中具体包括如下步骤:
S11,识别原始数据文件的数据类别及来源,并配置标签;
S12,依据标签通过智能识别规则对原始数据文件进行分类;
S13,采用多驱动并行规则窗口根据分类结果调度分发链路,推送到解析器的解析窗口;其中,
所述多驱动并行规则窗口在创建过程中调度多线程并行消费模式,实现并行技术融合,实现调度多驱动、多窗口,形成并行算法调度能力。
3.根据权利要求2所述的方法,其特征在于:在步骤S12中,若判断原始数据文件不符合智能识别规则,则将原始文件备份到指定目录并进行告警。
4.根据权利要求1所述的方法,其特征在于:在步骤S2中,所述配置信息包含解析规则配置、复杂算法配置、算法与解析的优先级规则配置;其中,
解析规则配置是针对海洋观测数据的特殊性进行对应的解析规则构建,形成解析规则集;
复杂算法配置是依据各业务数据的解析需求,在通常解析规则的基础上,增加算法解析的步骤。
5.根据权利要求1所述的方法,其特征在于:在步骤S3中,通过输出器接收到输出触发命令,并判断是否符合校验标准要求,
若符合标准要求则存入数据库,并同时触发移除解析窗口命令,返回输出成功记录;
若不符合要求,则打标机并返回解析流程。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于国家海洋信息中心,未经国家海洋信息中心许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110516907.3/1.html,转载请声明来源钻瓜专利网。