[发明专利]大数据价值发现与应用创新平台系统

说明书

本发明提供一种大数据价值发现与应用创新平台系统，包括协作式业务建模模块、数据管理模块等；协作式业务建模模块通过将业务建模所需的数据读写、数据预处理、特征工程、模型训练、模型评估和模型应用环节；数据管理模块用于供用户通过本地文件系统、Oracle、MySQL数据库上传数据；批量任务调度模块用于供用户将多个工作流设置为顺序执行的批量作业列表，然后一键触发批量任务执行；用户管理模块用于供管理员对平台用户进行用户管理；可视化用户界面模块用于实现模块增减和模块顺序调整；活动和通知模块用于实现通知、标注及评论的功能；标签和搜索模块用于实现创建标签及搜索资源的功能。

技术领域

本发明具体涉及大数据技术领域，具体涉及一种大数据价值发现与应用创新平台系统。

背景技术

近年来，大数据发展已经上升为国家战略，国务院颁布了《关于促进大数据发展行动纲要》，工信部印发了《国家大数据产业发展规划(2016-2020年)》。我国经济正在向形态更高级、分工更复杂、结构更合理的阶段演化，经济发展进入新常态，正从高速增长转向中高速增长。成都市新经济发展大会提出，成都将重点发展数字经济、智能经济、绿色经济、创意经济、流量经济、共享经济“六大新经济形态”，为建设全面体现新发展理念的国家中心城市打造新的动力引擎，构建具有成都特色的新经济产业体系。

随着大数据时代的到来，对于政府和企业而言，拥有海量、多样的数据资源，而经济增长方式是“生产要素的分配、投入、组合和使用的方式”，创新性地挖掘和应用隐藏在经济增长相关数据背后的事物发展规律，可以有效实现传统资源的投入、组合和使用方式的优化和预测。但就目前而言，大数据是一门新兴的技术，处于高速发展阶段，一方面利用传统技术难以进行充分的数据分析与挖掘，另一方面，大数据人才的严重匮乏，而且人力成本非常昂贵，使得政府和企业不能够及时充分地利用内外部数据，不能发现数据背后的价值和规律。如何提升海量数据的快速处理能力、数据的分析挖掘能力、大数据算法能力以通过数据助力新经济发展，是亟待解决的重要问题，也是新经济发展的关键所在。

发明内容

本发明的目的在于针对现有技术的不足，提供一种大数据价值发现与应用创新平台系统，该大数据价值发现与应用创新平台系统可以很好地解决上述问题。

为达到上述要求，本发明采取的技术方案是：提供一种大数据价值发现与应用创新平台系统，该大数据价值发现与应用创新平台系统包括协作式业务建模模块、数据管理模块、批量任务调度模块、用户管理模块、可视化用户界面模块、活动和通知模块、标签和搜索模块；协作式业务建模模块通过将业务建模所需的数据读写、数据预处理、特征工程、模型训练、模型评估和模型应用环节，统一封装为形式一致的可视化算子，以可视化算子的形式提供机器学习算法和数据读写、数据处理工具箱，用户在浏览器上，使用可视化组件和拖拉拽操作来拼装CRISP-DM工作流，即可完成海量数据探索、业务建模和模型部署的数据挖掘过程，从而发现数据价值；数据管理模块用于供用户通过本地文件系统、Oracle、MySQL数据库上传数据；批量任务调度模块用于供用户将多个工作流设置为顺序执行的批量作业列表，然后一键触发批量任务执行，或让任务在指定时间范围内自动按某一周期运行，任务执行完毕，用户在邮件和通知栏收到执行报告，执行报告包含每个工作流作业的完成状态和完成时间信息；用户管理模块用于供管理员对平台用户进行用户管理，所述用户管理包括License 管理、创建平台用户、修改管理员及平台用户资料、删除平台用户；可视化用户界面模块用于实现模块增减和模块顺序调整，通过拖拽和连线的方式构建业务建模流程；活动和通知模块用于实现通知、标注及评论的功能；标签和搜索模块用于实现创建标签及搜索资源的功能。

该大数据价值发现与应用创新平台系统具有的优点如下：