[发明专利]一种预编译函数缓存引擎的大数据处理方法在审
申请号: | 201811628499.5 | 申请日: | 2018-12-28 |
公开(公告)号: | CN109753306A | 公开(公告)日: | 2019-05-14 |
发明(设计)人: | 周伟;余佳阳;季桃桃;周群年;金正皓 | 申请(专利权)人: | 北京东方国信科技股份有限公司 |
主分类号: | G06F9/28 | 分类号: | G06F9/28;G06F16/2455 |
代理公司: | 北京知呱呱知识产权代理有限公司 11577 | 代理人: | 丁彦峰;朱红涛 |
地址: | 100102 北京市朝*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明实施例公开了一种预编译函数缓存引擎的大数据处理方法,所述方法包括:引擎缓存大小及优化策略设置;根据用户需求生成表达式树;遍历所述表达式树,生成该表达式树的特征字符串,同时提取常量节点数据并缓存;生成所述特征字符串的唯一值;根据所述唯一值查找缓存中是否存储有预编译的即时编译函数;若不存在,则生成即时编译函数并缓存;将所述常量节点数据代入所述即时编译函数进行处理,在高并发单点查询的场景下对海量数据处理的延迟时间在毫秒级别,大大加快了大数据处理速度,有效的利用了CPU和内存资源,减轻了分布式OLAP或OLTP数据库的查询负载,满足高性能大数据处理需求。 | ||
搜索关键词: | 缓存 表达式树 数据处理 预编译 编译 常量 特征字符串 缓存引擎 节点数据 海量数据处理 数据处理需求 毫秒级别 内存资源 引擎缓存 用户需求 优化策略 查询 遍历 延迟 数据库 存储 查找 场景 | ||
【主权项】:
1.一种预编译函数缓存引擎的大数据处理方法,其特征在于,所述方法包括:引擎缓存大小及优化策略设置;根据用户需求生成表达式树;遍历所述表达式树,生成该表达式树的特征字符串,同时提取常量节点数据并缓存;生成所述特征字符串的唯一值;根据所述唯一值查找缓存中是否存储有预编译的即时编译函数;若不存在,则生成即时编译函数并缓存;将所述常量节点数据代入所述即时编译函数进行处理。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京东方国信科技股份有限公司,未经北京东方国信科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201811628499.5/,转载请声明来源钻瓜专利网。
- 上一篇:卫星软件系统和卫星软件系统配置方法
- 下一篇:指令存储方法