[实用新型]大数据库一体机

说明书

技术领域

本实用新型涉一种大数据库一体机，具体讲是一种处理速度快且性能稳定的大数据库一体机，属于数据处理技术领域。

背景技术

随着计算机技术的飞速发展，各行各领域数据的呈几何级快速增长。这些数据来自各方面，从搜集天气情况的感测器、数码图片、在线的视频资料，到网络购物的交易记录、手机的全球定位系统信号等应有尽有。伴随数据规模的急剧膨胀，各行业累积的数据量越来越巨大，数据类型也越来越多、数据结构越来越复杂，已经超越了传统数据管理系统、处理模式的能力范围，传统的串行数据库系统已经难以适应这种飞速增长的应用需求，在生产实践中表现出明显的能力不足，无法满足大数据时代的数据处理需求。

发明内容

本实用新型所要解决的技术问题在于克服现有技术缺陷，提供一种处理速度快、操作效率高能适应大数据处理的大数据库一体机。

为了解决上述技术问题，本实用新型提供的大数据库一体机，包括若干个数据库处理单元、若干个SSD磁盘阵列、光纤交换机和SAN交换机；若干个SSD磁盘阵列均与SAN交换机连接，若干个数据库处理单元均分别与SAN交换机和光纤交换机连接。

本实用新型的有益效果在于：本实用新型采用SSD磁盘阵列作为共享存储设备提高读写速度，实现多节点负载均衡，通过并行数据库技术提高响应时间，可按需扩展系统，保证系统性能的稳定；本实用新型可使EB级数据能够秒级处理，极大极高了用户执行查询操作后的使用效率，其不仅在查询和检索数据时具有非常高的性能优势，还可以支持数据仓库存储、数据深度挖掘和商业智能分析等。

为保障大数据库一体机持续稳定运行，所述SAN交换机为两台，用于双备份。

本大数据库一体机采用JobKeeper分布式调度引擎，使达到大数据库一体机负载均衡、集群性能更优。

附图说明

图1为本实用新型大数据库一体机结构图；

图2为本实用新型大数据库一体机内部连接示意图；

图3为JobKeeper分布式调度引擎系统架构图。

具体实施方式

下面结合附图对本实用新型作详细说明。

如图1所示，本实用新型大数据库一体机包括由下而上依次安装标准机架1内的SSD磁盘阵列1、SSD磁盘阵列2、SSD磁盘阵列3、SAN交换机1、SAN交换机2、数据库处理单元1、数据库处理单元2、数据库处理单元3和光纤交换机，所有设备通过机架电源统一供电运行。

如图2所示，SSD磁盘阵列1、SSD磁盘阵列2、SSD磁盘阵列3分别与SAN交换机1、SAN交换机2相互连接通信，SAN交换机1、SAN交换机2同时分别与数据库处理单元1、数据库处理单元2、数据库处理单元3连接，实现SSD磁盘阵列1、SSD磁盘阵列2、SSD磁盘阵列3与数据库处理单元1、数据库处理单元2、数据库处理单元3之间数据传输；数据库处理单元1、数据库处理单元2、数据库处理单元3均连接光纤交换机，光纤交换机提供对外服务网络接口，连接对外服务网络，实现数据网络间传输。

本实用新型中每个数据库处理单元设置2块HBA卡，用于连接SAN交换机，共享磁盘阵列。每个数据库处理单元安装统一关系型数据库，上层应用为通用的数据库平台，系统根据负载情况自动切换访问独立节点的数据库。SSD磁盘阵列采用闪存作为存储介质，读写速度相对机械硬盘更快，功耗比传统硬盘低，实现低能耗高效率的数据存储。SAN交换机用于数据库处理单元共享磁盘阵列，通过2台SAN交换机实现备份，保证了大数据库一体机的持续稳定运行。

本实例中大数据库一体机采用3个SSD磁盘阵列和3个数据库处理单元，在实际工作过程中，SSD磁盘阵列和数据库处理单元的数量可根据需要进行增减，以实现不同级别的数据处理需求。

本实用新型中每个数据处理单元独立装载关系型数据库系统，共用阵列存储，形成组群模式。用户向JobKeeper分布式调度引擎提交数据库操作请求。JobKeeper分布式调度引擎根据各个数据处理单元的实际运行负载情况，将此操作请求下达到适合处理的数据处理单元之上，此处理单元独立完成操作后反馈给用户请求结果。以此模式达到利用SSD盘阵的高效IOPS和JobKeeper分布式调度引擎的负载均衡的优势，使得数据库操作的效率显著提高。通过引入索引模块、并行执行架构以及读取本地磁盘的方式，使EB级数据能够秒级处理。