[发明专利]一种基于GIS信息的人群行为分布的可视化方法在审
申请号: | 201711452704.2 | 申请日: | 2017-12-28 |
公开(公告)号: | CN108228772A | 公开(公告)日: | 2018-06-29 |
发明(设计)人: | 徐汕;刘强;单酉;刘明;王文彦;童奥;姜桥 | 申请(专利权)人: | 北京航天云路有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30;H04L29/12 |
代理公司: | 北京纽乐康知识产权代理事务所(普通合伙) 11210 | 代理人: | 黄利平 |
地址: | 100080 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 可视化 人群 存储 标准化 读取 用户访问网站 分布式框架 处理数据 数据保存 数据传输 数据转化 统计数据 页面添加 页面展示 用户数据 统计分析 信息化 加载 两级 遮盖 内存 后台 采集 分化 查询 展示 分析 | ||
本发明公开了一种基于GIS信息的人群行为分布的可视化方法,包括:通过logstash对用户访问网站的信息进行标准化,并将标准化后的数据传输到kafka中存储;利用storm实时分布式框架处理数据,从kafka中读取数据,根据采集到的用户数据,查询对应gis信息,对信息进行处理后存储到hdfs中;利用hadoop对信息化的数据进行统计分析,将分析得到的数据保存到mysql数据库中;前端请求后台api接口,读取mysql数据库中的统计数据,并根据具体的页面展示需求,将数据转化为option对象,通过在页面添加所需的option对象对数据进行可视化展示。有益效果:解决了图形过大产生的遮盖问题和地区密度两级分化的可视化效果较差的情况,避免了由于内存不够而加载过慢的现象,使得人群位置更加精准。
技术领域
本发明涉及数据可视化领域,具体来说,涉及一种基于GIS信息的人群行为分布的可视化方法。
背景技术
地图由于自带经纬度信息,历来受广大可视化项目的欢迎,但是目前基于地图的可视化方法仍然比较单一,而且由于大数据时代的到来,对大数据的处理和可视化方法提出了更大的挑战。
在基于地图的可视化方法中,一种为用形状大小表示某区域某种数量的大小,如北京人口大于天津人口,则地图上北京的圆的半径大于天津的圆。这种基于地图的方法在小数据量及较稀疏的区域统计时可行,但当统计区域精确到街道等更加精细的区域时,用形状表示数量的大小的方法则会产生困难,形状过小,影响可视化的辨识度,形状过大,由于地图面积有限,形状会相互之间发生覆盖,甚至形成大面积的覆盖情况,使可视化图丢失大量信息。
另一种为点密度图,其中一个点可以表示一个或多个个体,但该图仅表示某一区域密度,并不精确定位到每个个体的经纬度,而是在某计算区域均匀分布;其次由于每个点代表的个体数量相等,当数据量较大且各区域差异较大是,会发生全覆盖或过稀疏情况,降低可视化效果。
针对相关技术中的问题,目前尚未提出有效的解决方案。
发明内容
针对相关技术中的上述技术问题,本发明提出一种基于GIS信息的人群行为分布的可视化方法,能够改善现有可视化方法在展示大数据时可能存在的由于内存不够而加载过慢,数据展示方法选择困难等问题。
为实现上述技术目的,本发明的技术方案是这样实现的:
一种基于GIS信息的人群行为分布的可视化方法,包括以下步骤:
S1 通过logstash对用户访问网站的信息进行标准化,并将标准化后的数据传输到kafka中存储;
S2 利用storm实时分布式框架处理数据,从kafka中读取数据,根据采集到的用户数据,查询对应gis信息,对信息进行处理后存储到hdfs中;
S3 利用hadoop对信息化的数据进行统计分析,将分析得到的数据保存到mysql数据库中;
S4 前端请求后台api接口,读取mysql数据库中的统计数据,并根据具体的页面展示需求,将数据转化为option对象,通过在页面添加所需的option对象对数据进行可视化展示。
进一步的,S2中采集用户的ip地址,根据所述ip地址查询出相对应的gis信息。
进一步的,S3中根据用户的gis信息,访问网页的路径path,统计出不同的数据,将分析后的结果保存到mysql数据库中。
进一步的,分析后的结果包括用户访问网站的信息、用户的gis信息以及用户访问数。
进一步的,S4具体包括:
S41 前端通过js的ajax请求后台api接口,取回保存到mysql中的统计数据,根据可视化页面展示的需求,将取回的数据转为页面展示所需要的option对象;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京航天云路有限公司,未经北京航天云路有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711452704.2/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种基于用户标签算法
- 下一篇:一种实现信息保存的方法及装置