[发明专利]一种运营商数据处理方法、装置、服务器及存储介质在审
| 申请号： | 202110518135.7 | 申请日： | 2021-05-12 |
| 公开（公告）号： | CN113127413A | 公开（公告）日： | 2021-07-16 |
| 发明（设计）人： | 向阳;刘亮;林昀 | 申请（专利权）人： | 北京红山信息科技研究院有限公司 |
| 主分类号： | G06F16/11 | 分类号： | G06F16/11;G06F16/16;G06F16/172 |
| 代理公司： | 北京品源专利代理有限公司 11332 | 代理人： | 潘登 |
| 地址： | 100176 北京市大兴区北京经*** | 国省代码： | 北京;11 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明实施例公开了一种运营商数据处理方法、装置、服务器及存储介质。该方法包括：通过FTP或SFTP协议链接数据源服务器，每隔一个周期获取不同设备厂商的不同数据文件，将文件按厂家分门别类写入到hdfs目录中；遍历当前周期的所有文件的存储大小，计算各个文件存储大小所有值的方差，判断所述方差是否大于预设阈值；若方差大于预设阈值，则按照入口的size大小分发，确保每个核处理差数据量一致；若方差小于等于预设阈值，则对所有文件本地解压解析；处理后的数据进行字段名称、字段单位、字段数值统一标准转换，转换完毕后入库hive表。本发明实施例的技术方案，通过对运营商数据进行接入、到达检测、处理分发、解压解析，提高数据处理的效率和准确性。 | ||
| 搜索关键词： | 一种 运营商 数据处理 方法 装置 服务器 存储 介质 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于北京红山信息科技研究院有限公司，未经北京红山信息科技研究院有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202110518135.7/，转载请声明来源钻瓜专利网。
