[发明专利]分布式大数据的清理方法

说明书

本申请提供了一种分布式大数据的清理方法，包括：终端获取分布式大数据的数据存储时间，将存储时间大于时间阈值的数据确定为待清理数据；终端对待清理数据的第一清理数据执行关联操作，该关联操作具体包括：查找清理数据的关联数据的数量α，终端确定数量α大于数量阈值，将该第一清理数据保留，若确定数量α小于数量阈值，将该第一清理数据清理。本申请提供的技术方案具有降低成本的优点。

技术领域

本申请涉及大数据领域，具体涉及一种分布式大数据的清理方法。

背景技术

大数据（big data），IT行业术语，是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

现有的大数据的存储量大，占用了过多的存储资源，提高了成本。

发明内容

本发明的目的在于提供分布式大数据的清理法，该技术方案能够对大数据进行分类清理，减少存储资源，降低成本。

第一方面，提供一种分布式大数据的清理方法，

终端获取分布式大数据的数据存储时间，将存储时间大于时间阈值的数据确定为待清理数据；

终端对待清理数据的第一清理数据执行关联操作，该关联操作具体包括：查找清理数据的关联数据的数量α，

终端确定数量α大于数量阈值，将该第一清理数据保留，若确定数量α小于数量阈值，将该第一清理数据清理。

本申请提供的方法终端获取分布式大数据的数据存储时间，将存储时间大于时间阈值的数据确定为待清理数据；终端对待清理数据的第一清理数据执行关联操作，该关联操作具体包括：查找清理数据的关联数据的数量α，终端确定数量α大于数量阈值，将该第一清理数据保留，若确定数量α小于数量阈值，将该第一清理数据清理。此方案能够依据其关联数据的数量α来确定该第一清理数据是否有用，进而确定该第一清理数据是否被清理或保留。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明一种终端的硬件结构示意图。

图2为本发明提供的分布式大数据的清理方法的流程示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

在本文中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是，本文所描述的实施例可以与其它实施例相结合。

下面结合本申请实施例中的附图对本申请实施例进行描述。

本申请中术语“和/或”，仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中字符“/“，表示前后关联对象是一种“或”的关系。