[发明专利]电力系统跨平台大数据文件高速并发存取方法

权利要求书

1.一种电力系统跨平台大数据文件高速并发存取方法，其特征在于：对数据文件采用内存映射文件的方式来加以处理，且采用将数据文件分固定块内存映射文件方法，并发地将数据文件的各个部分依次映射到数据处理服务进程中的一个较小的地址空间，以达到应用程序高速存取数据的要求；另外，设置一个对于已经加载过的数据如果再次出现访问则不需要再次加载、从而提高访问的效率以及速度的高速缓冲区，该高速缓冲区具备一定大小限制，在缓冲内容超过该限制时，能够自动将最不常用的数据从高速缓冲区移除；其中，具体的加载及映射数据块的过程为：1)应用程序需要处理数据时，通过一定的索引机制获得具体需要数据存储相关索引信息；2)根据此索引信息首先在高速缓冲区中搜索是否存在要求的数据块，如果存在则直接通过高速缓冲区返回应用；如果不存在，则通过文件映射的方式加载数据块到高速缓冲区并返回应用。

2.根据权利要求1所述的电力系统跨平台大数据文件高速并发存取方法，其特征在于：所述存取方法可支持Microsoft Windows、UNIX、IBM AIX、Sun Solaris、Alpha Tru64、HPUX、Linux操作系统平台，且源代码为一份相同的实体，不需要进行多份源码的维护。

3.根据权利要求1所述的电力系统跨平台大数据文件高速并发存取方法，其特征在于：所述存取方法的编程语言采用ANSI C/C++，并符合IEEE POSIX.2标准。

4.根据权利要求1所述的电力系统跨平台大数据文件高速并发存取方法，其特征在于：每次文件映射数据块的大小为固定值512K字节。

5.根据权利要求3或4所述的电力系统跨平台大数据文件高速并发存取方法，其特征在于：每一个数据块在文件映射时还可以指定是否为只读，对于只读的数据块，在程序退出或从高速缓冲区移除时只需要简单的取消文件映射即可，而对于非只读的数据块在取消文件映射前进行回写的操作，另外，还会周期性地对所有非只读的数据块进行扫描并回写，以确保数据的可靠与一致。

6.根据权利要求1所述的电力系统跨平台大数据文件高速并发存取方法，其特征在于：对于每一个加载到高速缓冲区的数据块，使用一个访问频度标志，该标志数值越大意味着该数据块使用的频度越高，在高速缓冲区没有可以继续分配的空间时，自动将最不常用的数据从高速缓冲区取消映射。