-
公开(公告)号:CN105956128B
公开(公告)日:2019-09-17
申请号:CN201610302217.7
申请日:2016-05-09
IPC: G06F16/182
Abstract: 本发明公开一种基于简单再生码的自适应编码存储容错方法,其包含以下四个主要步骤:1)存入HDFS中的文件,以三副本方式存储;2)一个时间周期后,文件转为简单再生码快速码编码;3)当文件访问减少后,文件转为简单再生码紧凑码编码;4)随着运行中文件的动态属性,可能发生步骤2)和步骤3)中文件编码状态相互转化的情况。本发明通过在分布式文件系统HDFS中同时使用简单再生码紧凑码和快速码的两种编码形态,来达到存储开销和修复代价的折中,将基于简单再生码的自适应编码方法引入到HDFS中,结合文件状态和系统状态,建立了自适应编码机制,提高分布式存储系统的整体存储效率,降低修复代价。
-
公开(公告)号:CN105956128A
公开(公告)日:2016-09-21
申请号:CN201610302217.7
申请日:2016-05-09
Applicant: 南京大学
IPC: G06F17/30
Abstract: 本发明公开一种基于简单再生码的自适应编码存储容错方法,其包含以下四个主要步骤:1)存入HDFS中的文件,以三副本方式存储;2)一个时间周期后,文件转为简单再生码快速码编码;3)当文件访问减少后,文件转为简单再生码紧凑码编码;4)随着运行中文件的动态属性,可能发生步骤2)和步骤3)中文件编码状态相互转化的情况。本发明通过在分布式文件系统HDFS中同时使用简单再生码紧凑码和快速码的两种编码形态,来达到存储开销和修复代价的折中,将基于简单再生码的自适应编码方法引入到HDFS中,结合文件状态和系统状态,建立了自适应编码机制,提高分布式存储系统的整体存储效率,降低修复代价。
-