Invention Publication
- Patent Title: 一种基于关系型数据库转存大数据平台的方法及系统
- Patent Title (English): Relational database-based big data platform unloading method and system
-
Application No.: CN201810313923.0Application Date: 2018-04-09
-
Publication No.: CN108763276APublication Date: 2018-11-06
- Inventor: 盛万兴 , 刘海涛 , 吕广宪 , 刘鹏 , 王猛 , 陆一鸣 , 王立岩
- Applicant: 中国电力科学研究院有限公司 , 国家电网公司 , 国网浙江省电力有限公司
- Applicant Address: 北京市海淀区清河小营东路15号; ;
- Assignee: 中国电力科学研究院有限公司,国家电网公司,国网浙江省电力有限公司
- Current Assignee: 中国电力科学研究院有限公司,国家电网公司,国网浙江省电力有限公司
- Current Assignee Address: 北京市海淀区清河小营东路15号; ;
- Agency: 北京安博达知识产权代理有限公司
- Agent 徐国文
- Main IPC: G06F17/30
- IPC: G06F17/30

Abstract:
一种基于关系型数据库转存大数据平台的方法及系统,包括:在关系型数据库文件中抽取待转存的数据,并转换为大数据平台指定的格式文件;如果所述关系型数据库与大数据平台在同一个网络环境中时,将所述指定格式的文件存储至获取的分布式文件系统路径中;否则通过中间媒介将所述指定格式的文件存储至获取的分布式文件系统路径中。本发明从数据库数据源简单快速的解析数据到大数据平台中,与传统的ETL工具相比,解决了ETL只能转存关系型数据源和大数据平台在同一网络的缺点,从而满足了不同的网络环境要求,进而提高了效率。
Information query