[发明专利]一种用于大数据随机抽样的方法和系统在审
| 申请号: | 201510294368.8 | 申请日: | 2015-06-02 |
| 公开(公告)号: | CN104881475A | 公开(公告)日: | 2015-09-02 |
| 发明(设计)人: | 唐平;梁竹;肖丹;王威 | 申请(专利权)人: | 北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司 |
| 主分类号: | G06F17/30 | 分类号: | G06F17/30 |
| 代理公司: | 中科专利商标代理有限责任公司 11021 | 代理人: | 赵伟 |
| 地址: | 100080 北京市海淀区杏石口路6*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 用于 数据 随机 抽样 方法 系统 | ||
1.一种数据库中的随机抽样方法,所述方法包括以下步骤:
步骤a:将多个记录分为多个组;
步骤b:随机抽取所述多个组中的一个或多个组;以及
步骤c:在所随机抽取的所述一个或多个组中,随机抽取要抽取数量的记录。
2.根据权利要求1所述的方法,其中,所述多个组中的每一个组内记录的数量是相等的。
3.根据权利要求1或2所述的方法,其中,步骤a还包括:为所述多个组中的每一个组中的特定记录创建索引。
4.根据权利要求3所述的方法,其中,所述特定记录是所述多个组中的每一个组中的第一个记录。
5.根据权利要求3所述的方法,其中,创建索引包括将所述索引存放在数据库。
6.根据权利要求3所述的方法,其中,创建所述索引的周期是根据任务执行的周期确定的。
7.根据权利要求1所述的方法,其中,步骤c还包括:基于要抽取的记录的数量,产生第一随机数;对所随机抽取的所述一个或多个组中的数据进行逐一扫描;对于每一个所扫描的数据,基于要抽取的记录的数量,产生第二随机数;如果所述第一随机数等于所述第二随机数,则抽取所述记录。
8.根据权利要求7所述的方法,其中,基于要抽取的记录的数量产生第一随机数还基于所述多个记录的数量;基于要抽取的记录的数量产生第二随机数还基于所述多个记录的数量。
9.根据权利要求8所述的方法,其中,基于所述要抽取的记录的数量和所述多个记录的数量产生第一随机数是随机产生小于等于所述多个记录的数量除以要抽取的记录的数量的第一随机数;基于所述要抽取的记录的数量和所述多个记录的数量产生第二随机数是随机产生小于等于所述多个记录的数量除以要抽取的记录的数量的第二随机数。
10.一种用于数据库中的随机抽样系统,所述系统包括:
分组装置,被配置为:将多个记录分为多个组;
随机抽取装置,被配置为:随机抽取所述多个组中的一个或多个组,并在所随机抽取的所述一个或多个组中,随机抽取要抽取数量的记录。
11.根据权利要求10所述的系统,其中,所述多个组中的每一个组内记录的数量是相等的。
12.根据权利要求10或11所述的系统,其中,所述分组装置还被配置为:为所述多个组中的每一个组中的特定记录创建索引。
13.根据权利要求12所述的系统,其中,所述特定记录是所述多个组中的每一个组中的第一个记录。
14.根据权利要求12所述的系统,其中,创建索引包括将所述索引存放在数据库。
15.根据权利要求12所述的系统,其中,创建所述索引的周期是根据任务执行的周期确定的。
16.根据权利要求10所述的系统,其中,所述随机抽取装置被配置为:基于要抽取的记录的数量,产生第一随机数;对所随机抽取的所述一个或多个组中的数据进行逐一扫描;对于每一个所扫描的数据,基于要抽取的记录的数量,产生第二随机数;如果所述第一随机数等于所述第二随机数,则抽取所述记录。
17.根据权利要求16所述的系统,其中,基于要抽取的记录的数量产生第一随机数还基于所述多个记录的数量;基于要抽取的记录的数量产生第二随机数还基于所述多个记录的数量。
18.根据权利要求17所述的系统,其中,基于所述要抽取的记录的数量和所述多个记录的数量产生第一随机数是随机产生小于等于所述多个记录的数量除以要抽取的记录的数量的第一随机数;基于所述要抽取的记录的数量和所述多个记录的数量产生第二随机数是随机产生小于等于所述多个记录的数量除以要抽取的记录的数量的第二随机数。
19.一种计算机可读存储介质,所述计算机可读存储介质包括由处理器执行的指令,所述指令被处理器执行以使所述处理器实现根据权利要求1~9中任一项所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司,未经北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201510294368.8/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





