[发明专利]一种大数据分析系统

说明书

本发明公开了一种大数据分析系统，包括收视数据处理模块、收视数据计算模块和收视数据报表模块；所述收视数据处理模块用于播控平台中的数据采集、数据清洗和数据入库；所述收视数据计算模块用于计算收视数据的计算和用户肖像分析；所述收视数据报表模块用于数据报表和数据图表生成。本发明大数据分析系统，系统分析高效全面准确，将实时数据和离线数据打通，实现播控平台精准化运营，支持多人同时访问。

技术领域

本发明涉及信息管理技术领域，尤其是涉及一种大数据分析系统。

背景技术

传统收视数据采集一般采用采样方式，即隔一定时间(称采样周期)对同一点数据重复采集。采集的数据大多是瞬时值，或者是某段时间内的一个特征值。在此采集的数据的基础上分析出的结果不够精确，可能会与实际出入较大；同时，由于数据体量比较大，系统数据处理速度较慢，且不支持多人同时操作，工作效率大大折扣。

发明内容

有鉴于此，本发明的目的是针对现有技术的不足，提供一种大数据分析系统，系统分析高效全面准确，将实时数据和离线数据打通，实现播控平台精准化运营，支持多人同时访问。

为达到上述目的，本发明采用以下技术方案：一种大数据分析系统，包括收视数据处理模块、收视数据计算模块和收视数据报表模块；

所述收视数据处理模块用于播控平台中的数据采集、数据清洗和数据入库；所述收视数据计算模块用于计算收视数据的计算和用户肖像分析；所述收视数据报表模块用于数据报表和数据图表生成。

进一步地，所述收视数据处理模块通过机顶盒采集原始收视数据，采集的原始收视数据信息包括用户终端版本，所属运营商平台，用户所在地区分组，用户观看的频道和节目，用户开始和结束观看的时间；所述收视数据处理模块每天定时进行数据清洗，并将清洗完成的数据入库到分布式计算存储节点中。

进一步地，所述原始收视数据还包括无效行为数据，所述无效行为数据为连续换台、夜晚时间不关机行为的数据；所述收视数据处理模块按照用户停留时间长短的规则进行数据清洗，只保留有效的行为数据。

进一步地，所述收视数据计算模块计算特定时间段内按照分钟、小时、天、周、月、季度、全年的时间长度划分的频道收视率、市场份额、收视时长、接触度、到达率、忠实度、节目收视数据、观众流动情况；所述收视数据计算模块采用ES技术实现对大批量数据的全文搜索、结构化搜索和分析；所述收视数据计算模块提供频道节目流水数据，用于查询一天之中各个节目的收视数据，也用于按历史节目编排播出单进行查询，将节目历史收视率数据进行汇总；所述收视数据计算模块可查询用户行为轨迹，根据用户的历史收视行为为用户绘制用户肖像，所述用户肖像可定位出用户所属的人群，定位数据通过所述收视数据计算模块计算可用于查询频道、节目的主要受众观众人群构成。

进一步地，收视数据报表模块针对特定的收视查询需求，生成相应的收视数据报表；收视数据报表模块按照特定的格式将可查询的数据制定出模板，系统自动计算报表内的数据；收视数据报表模块还可依需求自动生成频道收视分钟曲线图，收视数据柱状图，收视份额饼状图的图形报表。

本发明的有益效果是：

本发明大数据分析系统采集全方位收视数据，形成多维度的分析报表，使分析出的结果更加的全面准确。本发明大数据分析系统精细化到收视数据每分钟的走势，实现精准化运营；采用分布式搜索引擎(ES)技术实现对大批量数据的全文搜索、结构化搜索和分析，在支持多人同时访问的同时，使得系统分析更加的高效。

本发明大数据分析系统将互联网应用和大数据产品整合起来，将实时数据和离线数据打通，使数据可以实现更大规模的关联计算，挖掘出数据更大的价值，从而实现数据驱动业务。大数据分析系统使得大数据技术产品可以落地应用，实现自身价值。收视数据报表模块依靠大数据平台的计算性能，可以实现高效率的数据报表制作，并节约大量的人工成本。