Invention Publication
- Patent Title: 无线城市大数据离线处理系统及其大数据离线处理方法
- Patent Title (English): Wireless city big data offline processing system and big data offline processing method of system
-
Application No.: CN201711044154.0Application Date: 2017-10-31
-
Publication No.: CN107908683APublication Date: 2018-04-13
- Inventor: 余保华 , 邓惠元 , 范联伟 , 徐圣吉 , 展昭 , 张金国 , 吴磊 , 胡鸿超
- Applicant: 安徽四创电子股份有限公司
- Applicant Address: 安徽省合肥市高新技术产业开发区香樟大道199号
- Assignee: 安徽四创电子股份有限公司
- Current Assignee: 安徽四创电子股份有限公司
- Current Assignee Address: 安徽省合肥市高新技术产业开发区香樟大道199号
- Agency: 合肥和瑞知识产权代理事务所
- Agent 王挺
- Main IPC: G06F17/30
- IPC: G06F17/30

Abstract:
本发明属于无线城市数据处理技术领域,特别涉及一种无线城市大数据离线处理系统及其大数据离线处理方法。本发明包括定时增量模块、抽取匹配模块、存储模块、分析模块以及统计模块,所述定时增量模块用于获取无线城市大数据的定时增量数据;抽取匹配模块用于读取所述定时增量数据,抽取匹配数据;存储模块用于接收并存储来自抽取匹配模块的匹配数据;分析模块用于读取并分析存储于存储模块中的匹配数据;统计模块用于统计并展示所述分析模块分析后的匹配数据。本发明采用HDFS文件系统,集多台Hadoop集群于一体,便于扩展,在HDFS文件系统上搭建的非关系型数据库HBase,实现将亿级无线城市大数据存储起来,满足了无线城市中的大数据量统计的需求。
Information query