Invention Publication
- Patent Title: 一种基于数据流的大数据增量抽取的数据交换平台
-
Application No.: CN201810548955.9Application Date: 2018-05-31
-
Publication No.: CN108874313APublication Date: 2018-11-23
- Inventor: 胡刚 , 范联伟 , 余保华 , 徐圣吉 , 张金国 , 展昭 , 李鑫 , 邓惠元 , 张国林 , 金文林 , 徐剑 , 刘春珲 , 胡斌 , 谢伟 , 赵树林 , 王梦园 , 杨培韬
- Applicant: 安徽四创电子股份有限公司
- Applicant Address: 安徽省合肥市高新技术产业开发区香樟大道199号
- Assignee: 安徽四创电子股份有限公司
- Current Assignee: 安徽四创电子股份有限公司
- Current Assignee Address: 安徽省合肥市高新技术产业开发区香樟大道199号
- Agency: 合肥和瑞知识产权代理事务所
- Agent 王挺
- Main IPC: G06F3/06
- IPC: G06F3/06

Abstract:
本发明涉及一种基于数据流的大数据增量抽取的数据交换平台,包括以下部分:网络服务器模块,为增量处理器模块和大数据存储模块提供执行环境,并用于托管大数据存储模块中的数据流的基于HTTP的命令和控制API;增量处理器模块,获取网络服务器模块提供的执行环境,将缓存队列存储在大数据存储模块中;大数据存储模块,获取网络服务器模块提供的执行环境,用于存储增量处理器模块的缓存队列;所述网络服务器模块的输出端连接增量处理器模块的输入端,增量处理器模块与大数据存储模块之间双向通信连接,网络服务器模块与大数据存储模块之间双向通信连接。本发明的数据变换平台对增量数据易于管理,使用方便,具有灵活缩放和可扩展的优点。
Public/Granted literature
- CN108874313B 一种基于数据流的大数据增量抽取的数据交换平台 Public/Granted day:2021-11-23
Information query