[发明专利]基于关系数据库处理小文件数据并发读写方法及装置在审
申请号: | 202210322237.6 | 申请日: | 2022-03-30 |
公开(公告)号: | CN115687272A | 公开(公告)日: | 2023-02-03 |
发明(设计)人: | 杨明;李广普;王大宝;罗斐 | 申请(专利权)人: | 中国工商银行股份有限公司 |
主分类号: | G06F16/172 | 分类号: | G06F16/172;G06F16/176;G06Q40/02 |
代理公司: | 北京三友知识产权代理有限公司 11127 | 代理人: | 刘熔;董骁毅 |
地址: | 100140 北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 关系 数据库 处理 文件 数据 并发 读写 方法 装置 | ||
1.一种基于关系数据库处理小文件数据并发读写方法,其特征在于,所述方法包含:
根据接收到的存入报文数据解析获得业务数据和影像文件数据;
通过所述业务数据生成批次实体,通过所述批次实体将所述影像文件数据中多个影像小文件定位到对应的大文件或数据库BLOB字段分区中存储并记录影像小文件的存入信息;
根据所述存入信息和所述影像小文件的影像描述信息生成对应的影像属性信息,根据所述影像属性信息生成对应的影像属性实体;
将所述影像属性实体与所述批次实体关联存储后,通过所述批次实体生成写入结果。
2.根据权利要求1所述的基于关系数据库处理小文件数据并发读写方法,其特征在于,根据接收到的存入报文数据解析获得业务数据和影像文件数据包含:
根据所述存入报文数据通过码制转换获得业务数据,并解压还原所述存入报文数据中的影像小文件获得二进制数据流;
根据所述二进制数据流获得影像文件数据。
3.根据权利要求2所述的基于关系数据库处理小文件数据并发读写方法,其特征在于,通过所述批次实体将所述影像文件数据中多个影像小文件定位到对应序号的大文件分区中存储并记录影像小文件的存入信息包含:
通过所述批次实体将所述影像文件数据中同一集合的多个影像小文件关联;
根据所述批次实体定位获得对应的大文件的位置信息,通过所述位置信息将关联后的多个影像小文件以二进制数据流的方式存入所述大文件并记录对应的存入信息。
4.根据权利要求3所述的基于关系数据库处理小文件数据并发读写方法,其特征在于,所述存入信息包含存放路径、偏移量和内容长度。
5.根据权利要求3所述的基于关系数据库处理小文件数据并发读写方法,其特征在于,所述方法还包含:
根据预设的批次实体与大文件的名称信息的对应规则,在每个文件存放系统上根据线程数量构建一个或多个对应名称信息的大文件;
其中,每个大文件由一个线程写入数据。
6.根据权利要求5所述的基于关系数据库处理小文件数据并发读写方法,其特征在于,所述方法还包含:
当任一批次的影像小文件存入所述大文件完成后,检测当前所述大文件内的数据存储量;
当所述数据存储量高于预设阈值时,关闭当前所述大文件的写入通道并重新构建一个大文件完成后续批次的影像小文件写入操作。
7.根据权利要求1所述的基于关系数据库处理小文件数据并发读写方法,其特征在于,所述方法还包含:
根据接收到的查询报文数据解析获得批次实体,根据所述批次实体获得对应的所述业务数据;
根据所述批次实体定位对应批次的所述影像属性实体,通过所述影像属性实体查询获得对应的所述影像属性信息;
根据所述影像属性信息到对应的大文件或数据库BLOB字段分区中获得影像小文件;
根据所述业务数据、所述影像属性信息和所述影像小文件生成查询结果。
8.一种基于关系数据库处理小文件数据并发读写装置,其特征在于,所述装置包含数据接收单元、处理模块和数据发送单元;
所述数据接收单元用于根据接收到的存入报文数据解析获得业务数据和影像文件数据;
所述处理模块用于通过所述业务数据生成批次实体,通过所述批次实体将所述影像文件数据中多个影像小文件定位到对应的大文件或数据库BLOB字段分区中存储并记录影像小文件的存入信息;以及,根据所述存入信息和所述影像小文件的影像描述信息生成对应的影像属性信息,根据所述影像属性信息生成对应的影像属性实体;将所述影像属性实体与所述批次实体关联存储后,通过所述批次实体生成写入结果;
所述数据发送单元用于将写入结果反馈至所述存入报文数据发送方。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国工商银行股份有限公司,未经中国工商银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210322237.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:冲压装置及冲压装置的控制方法
- 下一篇:可变尺寸家禽饲喂器