[发明专利]基于大数据库的信息数据存储整合系统

说明书

本发明涉及数据存储的技术领域，特别是涉及一种基于大数据库的信息数据存储整合系统，其减少重复的数据占用的存储器空间，并且减少重复数据上传占用的带宽资源，提高实用性；包括：服务器数据存储单元，用于存储文件的数据，并将数据依协议分为文件头和存储数据，其中文件头用来记录文件名、文件属性、占用簇号等信息，存储数据用来保存存储文件的真实数据，并且文件头保存在簇内部并映射在文件分配表中；存储数据抽查单元，用固定的抽取规则在服务器数据存储单元的存储数据中抽取多组抽查信息并发送；文件头扩充信息单元，用于读取服务器数据存储单元的文件分配表中的文件头并接收文件头所对应的多组抽查信息。

技术领域

本发明涉及数据存储的技术领域，特别是涉及一种基于大数据库的信息数据存储整合系统。

背景技术

随着互联网和信息技术的发展，服务器中的数据呈几何级数增长，使社会进入大数据时代。大数据的基础，即大数据库的信息数据的信息存储，庞大的数据存储占用较多的存储器，并且信息存储的过程中占用较多的带宽资源，导致实用性较差。寻求有效的大数据库的信息数据存储的方法己经成为现实世界的迫切需求，面对越来越庞大的数据量，如何做到有效的存储大数据库的信息数据成为亟待解决的技术问题。

发明内容

本发明所要解决的技术问题是：提供一种基于大数据库的信息数据存储整合系统，以减少重复的数据占用的存储空间。

本发明所采用的技术方案为：基于大数据库的信息数据存储整合系统，包括：

服务器数据存储单元，用于存储文件的数据，并将数据依协议分为文件头和存储数据，其中文件头用来记录文件名、文件属性、占用簇号等信息，存储数据用来保存存储文件的真实数据，并且文件头保存在簇内部并映射在文件分配表中；

存储数据抽查单元，用固定的抽取规则在服务器数据存储单元的存储数据中抽取多组抽查信息并发送；

文件头扩充信息单元，用于读取服务器数据存储单元的文件分配表中的文件头并接收文件头所对应的多组抽查信息，并且将文件头和多组抽查信息组合为文件头扩充信息并储存；

数据上传单元，用于上传个体数据，并且接收个体数据所对应的访问链接；

数据接收单元，用于接收数据上传单元的个体数据并转发；

上传数据文件头提取单元，用于接收数据接收单元的个体数据，并且提取个体数据中的文件头并发送；

文件头比对单元，用于接收上传数据文件头提取单元的个体数据中的文件头，并且通过读取服务器数据存储单元的文件分配表中的文件头并与个体数据中的文件头进行比对，当文件分配表中的文件头并与个体数据中的文件头不一致时，将文件头比对结果信号赋值为“0”；当文件分配表中的文件头并与个体数据中的文件头检索信号一致时，将文件头比对结果信号赋值为“1”并发送；

上传数据存储数据抽查单元，用于接收数据接收单元的个体数据，通过与存储数据抽查单元相同的抽取规则在个体数据的存储数据中抽取多组抽查信息并发送；

存储数据比对单元，用于接收文件头比对单元的文件头比对结果信号，当文件头比对结果信号赋值为“1”时，读取对应文件头扩充信息单元的文件头扩充信息中的多组抽查信息组合，并且接收对应的上传数据存储数据抽查单元的多组抽查信息，并将多组文件头扩充信息单元抽查信息组合与上传数据存储数据抽查单元的抽查信息依次进行比对，当比对结果存在差异时，将比对结果信号赋值为“0”并发送；当比对结果一致时，将比对结果信号赋值为“1”并发送；

上传数据写入单元，用于接收存储数据比对单元的比对结果信号，当比对结果信号为“1”时，上传数据写入单元无操作；当比对结果信号为“0”时，将数据接收单元的个体数据写入服务器数据存储单元内并形成访问链接并发送；