一种大数据处理分布式缓存系统及其方法
摘要:
本发明公开了一种大数据处理分布式缓存系统及其方法,其中,该方法包括:将大数据处理服务器划分为若干个缓存单元,在每个缓存单元中以键值对的形式进行存储数据;根据缓存单元的被访问频率,计算缓存单元的价值并进行排序,提取预设价值阈值范围内的所有缓存单元;对提取的预设价值阈值范围内的所有缓存单元进行聚类,并将预设聚类数量的缓存单元分配至任一云计算缓存节点中进行存储。本发明使得数据在被访问或处理时,减少节点间的网络数据传输,缩短处理时间,有效提高大数据处理的效率。
公开/授权文献
0/0