[发明专利]一种空间数据存储方法有效
申请号: | 201711070905.6 | 申请日: | 2017-11-03 |
公开(公告)号: | CN107748794B | 公开(公告)日: | 2021-03-12 |
发明(设计)人: | 罗健欣;段伟伟;倪桂强;唐斌;高艺;胡琪;张琦;张雁飞 | 申请(专利权)人: | 中国人民解放军陆军工程大学;南京小吉狗网络科技有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22 |
代理公司: | 深圳市威世博知识产权代理事务所(普通合伙) 44280 | 代理人: | 李庆波 |
地址: | 210000 江*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 空间 数据 存储 方法 | ||
技术领域
本发明涉及计算机数据处理与存储技术领域,特别是涉及一种利用哈希方法对空间数据进行存储的数据存储方法。
背景技术
数据的存储和查找的方式,一直业界人士研究的课题。尤其涉及到图形学中,空间数据存在着大量的重复数据,例如,2D和3D纹理涉及到的数据通常是重复性的。如何在数据的高效存储与随机访问性能之间进行平衡,成为一个研究热点。通常的哈希算法是在哈希表中使用顺序的探针。此外,每个入口处的探针数量的不统一导致了在GPU上的低效率,因为根据单指令多数据流并行原理,所有线程都要等待具有最坏性能的探针。
2006年,Lefebvre和Hoppe首次使用完美哈希在GPU上实现对哈希表的访问。然而,该方法由于数据的位置取决于之前数据的位置,在该完美哈希方法中,所有的数据应当分别存储在哈希表的不同位置上。此外,即使那些重复的数据也要存储在哈希表的不同位置上。因此,哈希表的构建十分昂贵。
Myung等人提出了一种不含有父子指针的无链接八叉树,他使用完美哈希对细分的结点进行编码。然而,这些具有层次的结构在GPU上的随机访问性能却很低效。
发明内容
本发明主要解决的技术问题是提供一种空间数据存储方法,该存储方法能够无损地、高效地将数据压缩到较小的哈希表中,并保持对GPU的简单的随机访问。
为解决上述技术问题,本发明的空间数据存储方法采用的技术方案是:包括如下步骤:
第一步,读取原始的空间数据域U0,原始的空间数据域U0为d维度的数据域,将原始的空间数据域U0作为第一次压缩存储的输入空间数据域,由原始的空间数据域U0中的各数据所在的位置形成覆盖表C’;
第二步,识别所述输入空间数据域中的所有数据,并将需要存储的数据记为有效数据,有效数据的集合记为Ri,不需要存储的数据记为无效数据,其中i为当前迭代的次数,i取整数;
第三步,建立大小为mi的哈希表Ei,其中mi小于所述输入空间数据域的大小;
第四步,利用哈希函数对所述输入空间数据域中的有效数据集合Ri向哈希表Ei内压缩映射,映射到哈希表Ei中位置qi的有效数据记为集合hi-1(qi)∩Ri,其中,pi为有效数据在所述输入空间数据域中的位置,哈希系数M0设置为单位矩阵,为单一维度上哈希表Ei的大小;
第五步,将哈希表Ei中的位置qi进行赋值Ei(qi),将集合hi-1(qi)∩Ri中有效数据的值与值Ei(qi)相同的有效数据记为选定数据,有效数据的值与值Ei(qi)不相同的有效数据记为剩余数据,将选定数据压缩存储到哈希表Ei内的位置qi,形成存储所述选定数据的存储哈希表Ei',将剩余数据按照其在所述输入空间数据域内的位置移入到间接表Ui内,在覆盖表C’中将存储到哈希表Ei内的选定数据的位置标记成第i次压缩存储;
第六步,若输出的间接表Ui中的有效数据的集合Ri为空,则所述原始的空间数据域U0中的有效数据存储结束;若输出的间接表Ui中的有效数据的集合Ri不为空,则将间接表Ui作为下一次迭代压缩存储的输入空间数据域,并将覆盖表C’沿用到下一次迭代处理过程中,返回执行第二步操作。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国人民解放军陆军工程大学;南京小吉狗网络科技有限公司,未经中国人民解放军陆军工程大学;南京小吉狗网络科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711070905.6/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置