一种基于关系型数据库转存大数据平台的方法及系统
摘要:
一种基于关系型数据库转存大数据平台的方法及系统,包括:在关系型数据库文件中抽取待转存的数据,并转换为大数据平台指定的格式文件;如果所述关系型数据库与大数据平台在同一个网络环境中时,将所述指定格式的文件存储至获取的分布式文件系统路径中;否则通过中间媒介将所述指定格式的文件存储至获取的分布式文件系统路径中。本发明从数据库数据源简单快速的解析数据到大数据平台中,与传统的ETL工具相比,解决了ETL只能转存关系型数据源和大数据平台在同一网络的缺点,从而满足了不同的网络环境要求,进而提高了效率。
0/0