Invention Publication
- Patent Title: 一种基于湖仓一体的异构能源数据存储方法
-
Application No.: CN202411815764.6Application Date: 2024-12-11
-
Publication No.: CN119759996APublication Date: 2025-04-04
- Inventor: 田钺 , 吴漾 , 董若烟 , 郭棚 , 孙收余 , 王益彰 , 朱昌会 , 姚舜 , 张钊 , 林昌志 , 缪新萍 , 李文科 , 汪浩
- Applicant: 贵州电网有限责任公司
- Applicant Address: 贵州省贵阳市南明区滨河路17号
- Assignee: 贵州电网有限责任公司
- Current Assignee: 贵州电网有限责任公司
- Current Assignee Address: 贵州省贵阳市南明区滨河路17号
- Agency: 南京禹为知识产权代理事务所
- Agent 吴宜榛
- Main IPC: G06F16/25
- IPC: G06F16/25 ; G06F16/28

Abstract:
本发明公开了一种基于湖仓一体的异构能源数据存储方法包括,收集异构能源数据,并对所述数据进行预处理;对处理后的数据利用FCM算法进行模糊聚类提取出特征关键字;基于Hive组件将所述HDFS组件中的所述源数据加载到基于Hive组件创建的湖仓表中。本方法通过FCM聚类和ETL工具统一异构能源数据,优化数据加载和查询效率,降低处理耗时。利用湖仓一体架构增强了数据治理和跨领域共享,提升了系统扩展性和灵活性,降低数据处理耗时,提高数据查询及执行的效率并有效降低数据孤岛难统一管理的问题。
Information query