一种FTP数据库与HDFS数据库自动互传数据的方法
Abstract:
本发明涉及一种FTP数据库与HDFS数据库自动互传数据的方法,包括如下步骤:数据抽取,GetFTP处理器查询并抽取到FTP数据库中的FTP数据,GetHDFS处理器查询并抽取到HDFS数据库中的HDFS数据;数据转换,对UpdateAttribute处理器进行属性配置,UpdateAttribute处理器将抽取到的FTP数据转换为HDFS数据,将抽取到的HDFS数据转换为FTP数据;数据加载,分别对PutHDFS处理器和PutFTP处理器进行属性配置,PutHDFS处理器将转换得到的HDFS数据加载到HDFS数据库的目标文件夹中,PutFTP处理器将转换得到的FTP数据加载到FTP数据库的目标文件夹中。本发明降低了数据转换的错误率,实现了数据的高效抽取与互传。
Public/Granted literature
Patent Agency Ranking
0/0