[发明专利]大数据分布式存储方法、装置、电子设备、存储介质有效
| 申请号: | 201911297666.7 | 申请日: | 2019-12-17 |
| 公开(公告)号: | CN111061812B | 公开(公告)日: | 2022-09-02 |
| 发明(设计)人: | 董延峰 | 申请(专利权)人: | 江苏满运软件科技有限公司 |
| 主分类号: | G06F16/27 | 分类号: | G06F16/27;G06F3/04817;G06F3/0486 |
| 代理公司: | 上海隆天律师事务所 31282 | 代理人: | 潘一诺 |
| 地址: | 210012 江苏省南京市*** | 国省代码: | 江苏;32 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 数据 分布式 存储 方法 装置 电子设备 介质 | ||
1.一种大数据分布式存储方法,其特征在于,包括:
接收第一用户于用户交互界面输入的待储存数据源及该待储存数据源的存储地址;
利用storm接入所述第一用户输入的待储存数据源,并消费待储存数据源的数据,将经消费的所述待储存数据源的数据写入大数据集群的分布式文件系统;以及
所述分布式文件系统根据该待储存数据源的存储地址将所写入的待储存数据源的数据储存至大数据集群中,
其中,所述用户交互界面提供待储存数据源及该待储存数据源的存储地址关联关系的可视化展示,所述大数据分布式存储方法还包括:
实时接收第一用户于所述用户交互界面对待储存数据源及该待储存数据源的存储地址之间关联关系的修改,以使所述分布式文件系统根据经修改的待储存数据源及该待储存数据源的存储地址之间关联关系,将待储存数据源的数据储存至大数据集群中,
所述待储存数据源以第一图标显示于所述用户交互界面,所述存储地址以第二图标显示于所述用户交互界面,
其中,接收第一用户对所述第一图标的拖曳操作,当所述第一图标与一第二图标之间的距离小于第一预定距离时,生成该第一图标与该第二图标之间的可视化连线,并使自动使该第一图标显示于该第二图标的第二预定距离处,从而生成该第一图标的待储存数据源与该第二图标的存储地址之间的关联关系,
其中,当该第二图标的存储地址对应关联多个待储存数据源时,各第一图标基于关联关系建立的时间,按顺时针顺序,以放射状显示于第二图标的周围。
2.如权利要求1所述的大数据分布式存储方法,其特征在于,所述用户交互界面于网页上提供。
3.如权利要求1所述的大数据分布式存储方法,其特征在于,所述接收第一用户于用户交互界面输入的待储存数据源及该待储存数据源的存储地址之后,且所述利用storm接入所述第一用户输入的待储存数据源,并消费待储存数据源的数据,将经消费的所述待储存数据源的数据写入大数据集群的分布式文件系统之前,还包括:
接收第二用户对所述第一用户输入的待储存数据源及该待储存数据源的存储地址的审核数据。
4.如权利要求1所述的大数据分布式存储方法,其特征在于,所述利用storm接入所述第一用户输入的待储存数据源,并消费待储存数据源的数据,将经消费的所述待储存数据源的数据写入大数据集群的分布式文件系统包括:
基于ack机制消费待储存数据源的数据,并将经消费的所述待储存数据源的数据写入大数据集群的分布式文件系统;和/或
基于反压机制消费待储存数据源的数据,并将经消费的所述待储存数据源的数据写入大数据集群的分布式文件系统。
5.如权利要求1所述的大数据分布式存储方法,其特征在于,所述实时接收第一用户于所述用户交互界面对待储存数据源及该待储存数据源的存储地址之间关联关系的修改包括:
实时接收所述第一用户于所述用户交互界面对已呈放射状显示于第二图标周围的第一图标的选择,释放该第一图标的待储存数据源与该第二图标的存储地址之间的关联关系,消除该第一图标与该第二图标之间的可视化连线,并使该第二图标的存储地址在该第一图标的待储存数据源重新关联一第二图标的存储地址之前,对该第一图标的待储存数据源保持锁定;
接收第一用户对该第一图标的拖曳操作,当该第一图标与另一第二图标之间的距离小于所述第一预定距离时,生成该第一图标与该另一第二图标之间的可视化连线,并使自动使该第一图标显示于该另一第二图标的第二预定距离处,从而生成该第一图标的待储存数据源与该另一第二图标的存储地址之间的关联关系。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于江苏满运软件科技有限公司,未经江苏满运软件科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911297666.7/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种生物质燃料分级打包机
- 下一篇:一种导体陶瓷续连交换的镁合金铸造浇铸包
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





