发明公开
- 专利标题: 一种大数据处理分布式缓存系统及其方法
- 专利标题(英): Big data processing distributed cache system and method thereof
-
申请号: CN201510891553.5申请日: 2015-12-04
-
公开(公告)号: CN105554069A公开(公告)日: 2016-05-04
- 发明人: 马艳 , 陈玉峰 , 朱文兵 , 杜修明 , 郑建 , 袁海燕 , 任敬国 , 邹立达 , 苏东亮
- 申请人: 国网山东省电力公司电力科学研究院 , 山东中实易通集团有限公司 , 国家电网公司
- 申请人地址: 山东省济南市市中区望岳路2000号
- 专利权人: 国网山东省电力公司电力科学研究院,山东中实易通集团有限公司,国家电网公司
- 当前专利权人: 国网山东省电力公司电力科学研究院,山东中实易通集团有限公司,国家电网公司
- 当前专利权人地址: 山东省济南市市中区望岳路2000号
- 代理机构: 济南圣达知识产权代理有限公司
- 代理商 赵妍
- 主分类号: H04L29/08
- IPC分类号: H04L29/08 ; G06F17/30
摘要:
本发明公开了一种大数据处理分布式缓存系统及其方法,其中,该方法包括:将大数据处理服务器划分为若干个缓存单元,在每个缓存单元中以键值对的形式进行存储数据;根据缓存单元的被访问频率,计算缓存单元的价值并进行排序,提取预设价值阈值范围内的所有缓存单元;对提取的预设价值阈值范围内的所有缓存单元进行聚类,并将预设聚类数量的缓存单元分配至任一云计算缓存节点中进行存储。本发明使得数据在被访问或处理时,减少节点间的网络数据传输,缩短处理时间,有效提高大数据处理的效率。
公开/授权文献
- CN105554069B 一种大数据处理分布式缓存系统及其方法 公开/授权日:2018-09-11