一种数据存储及裁剪方法、设备和存储介质

    公开(公告)号:CN109684333A

    公开(公告)日:2019-04-26

    申请号:CN201811582594.6

    申请日:2018-12-24

    IPC分类号: G06F16/22 G06F16/27 G06F3/06

    摘要: 本发明提供一种数据存储及裁剪方法、设备和存储介质,该方法包括:包括:在本地数据库中存储第一默克尔树除根节点外的各节点的父节点信息;以及,在向第一默克尔树中插入第一叶子节点时,在本地数据库中存储对应于第一叶子节点的第一索引节点;其中,第一索引节点的第二键值包括第一叶子节点的第一键值、第一区块高度和第一哈希值;其中,第二键值用于查找与第一键值相同的若干索引节点和对应的叶子节点,父节点信息用于查找冗余的父节点。本发明通过存储叶子节点对应的索引节点,根据索引节点删除冗余的状态数据,在不影响正常的账户状态的前提下,大大提高了数据同步的速率,以及提高了读写效率。

    一种SAN双控存储系统的节点管理方法及相关装置

    公开(公告)号:CN109683824A

    公开(公告)日:2019-04-26

    申请号:CN201811577783.4

    申请日:2018-12-20

    发明人: 杨善松

    IPC分类号: G06F3/06

    摘要: 本发明公开了一种SAN双控存储系统的节点管理方法,包括:当故障节点恢复后,检查存活节点是否已完成脏数据下刷;若存活节点未完成脏数据下刷,则保持存活节点为Write Through模式并将恢复后的故障节点切换为Flush Through模式,以使恢复后的故障节点在Flush Through模式下处理I/O请求。该节点管理方法可使故障节点在恢复后快速实现I/O请求处理,能够降低故障节点对系统性能的影响,确保系统性能在故障节点恢复后能够快速恢复正常。本发明还公开了一种SAN双控存储系统的节点管理装置、设备、SAN双控存储系统以及计算机可读存储介质,均具有上述有益效果。

    一种数据处理方法、装置、设备及存储介质

    公开(公告)号:CN109656487A

    公开(公告)日:2019-04-19

    申请号:CN201811587324.4

    申请日:2018-12-24

    发明人: 丁磊

    IPC分类号: G06F3/06

    摘要: 本发明实施例公开了一种数据处理方法、装置、设备及存储介质,其中方法包括:接收写数据请求,所述写数据请求包括目标数据包;按照预设的处理规则对所述目标数据包进行处理,得到处理后的数据包,所述预设的处理规则包括数据格式处理规则或数据过滤处理规则;将所述处理后的数据包写入到所述固态硬盘中;当所述固态硬盘中的数据量达到预设数据量时,将所述固态硬盘中的数据包写入到所述机械硬盘中。通过将数据存储到固态硬盘,以减少机械硬盘的磁头的转动及盘片的转动,提高机械硬盘的寿命。

    一种基于底层聚合文件的空间回收方法、系统及相关装置

    公开(公告)号:CN108958653A

    公开(公告)日:2018-12-07

    申请号:CN201810668186.6

    申请日:2018-06-26

    发明人: 魏盟

    IPC分类号: G06F3/06

    摘要: 本申请公开了一种基于底层聚合文件的空间回收方法,首先选取出符合进行空间回收要求的目标底层聚合文件,根据组成各目标底层聚合文件的小文件的存留状态信息将其中未被删除的小文件提取出来,并将其重组为新底层聚合文件,同时删去原目标底层聚合文件以回收已被删除的小文件所占用的存储空间,得以消除现有技术中容易出现的跳跃式查询数据和对磁盘空间的浪费现象,空间回收机制更合理、不易使垃圾数据碎片化,也对存储系统性能影响更低。本申请还同时公开了一种基于底层聚合文件的空间回收系统、装置及计算机可读存储介质,具有上述有益效果。

    一种自适应编码长度的时序数据存储的方法和装置

    公开(公告)号:CN108052285A

    公开(公告)日:2018-05-18

    申请号:CN201711319331.1

    申请日:2017-12-12

    申请人: 清华大学

    IPC分类号: G06F3/06

    摘要: 本发明提供一种自适应编码长度的时序数据存储的方法和装置,包括按时间戳先后顺序获取时间戳对应的数据值,将预存储前n个数据值所需的存储空间值与预存储预设编码规则的规则信息和前n个数据值对应的编码数据所需的存储空间值的比值作为获取第n个数据值的时刻对应的存储收益,若获取第n个数据值的时刻对应的存储收益比获取第n‑1个数据值的时刻对应的存储收益小,则存储预设编码规则的规则信息和前n‑1个数据值对应的编码数据;从而引入了存储收益来判断时序数据序列中是否存在异常数据,在确定存在异常数据时,对异常数据之前所有数据按对应的编码数据存储,避免了异常数据在编码过程中造成的不良影响,保证了最佳的节省存储空间的效果。

    一种异构多核的通讯方法及固态硬盘控制器

    公开(公告)号:CN107957970A

    公开(公告)日:2018-04-24

    申请号:CN201710989769.4

    申请日:2017-10-23

    发明人: 肖锐

    IPC分类号: G06F15/167 G06F3/06

    摘要: 本发明公开了一种异构多核的通讯方法及硬盘控制器,其特征在于将各个CPU通过数据总线访问同一个共享内存进行数据通讯;特别是将执行过程中保持不变的通讯数据在数据第一次生成时存储到共享内存中,并纪录存储地址,CPU通过获取的存储地址访问获得共享内存中的通讯数据。通过从主机提交命令开始,到数据传输,固件的命令节点实体只有一个,不同CPU通过RAM-IF(RAM interface)访问命令节点实体,速度比通过AXI-BUS要快,基本做到数据传输“零拷贝”,由此大大降低了延迟,从而提升了写入带宽。