一种数据复制方法和设备

    公开(公告)号:CN106302559B

    公开(公告)日:2019-07-05

    申请号:CN201510236871.8

    申请日:2015-05-11

    IPC分类号: H04L29/08

    摘要: 本申请实施例公开了一种数据复制方法和设备,包括:目的端服务器获得数据块标识、版本信息和空洞信息;所述目的端服务器将所述数据块标识、版本信息和空洞信息发送给源端服务器,以使所述源端服务器根据所述数据块标识、版本信息和空洞信息查找到对应的数据;所述目的端服务器接收所述源端服务器发送的携带所述数据的响应消息,并根据所述响应消息将所述数据复制到所述数据块标识、版本信息和空洞信息对应的空洞,从而实现了随机读写方式下只对空洞进行数据复制,不需要进行数据的全量复制从而减少了待复制的数据量及复制时间,提高了数据复制效率。

    一种多层关联存储架构的数据同步方法及数据同步系统

    公开(公告)号:CN103793181B

    公开(公告)日:2019-05-24

    申请号:CN201210435819.1

    申请日:2012-11-05

    发明人: 舒军 田明 黄利华

    IPC分类号: G06F3/06

    摘要: 一种多层关联存储架构的数据同步方法包括:主模块接收外部写操作的请求,将数据写到写缓存,并根据对所述写缓存的写操作记录一个数字序列;当主模块的写缓存数据量达到一阈值,数据从写缓存刷新输出至固态硬盘文件;主模块为刷新输出操作记录一个数字序列;主模块按数字序列中数字的顺序,将写操作与刷新输出操作分别同步给从模块;从模块接收同步的写操作,将主模块的写缓存数据同步到本地写缓存的对应位置;从模块接收到同步的刷新输出操作,将主模块的固态硬盘文件同步到本地固态硬盘文件的对应位置。本发明将写缓存和固态硬盘文件之间的关系解耦,各自同步自己的数据,可保证数据的准确性和一致性。本发明还提供一种多层关联存储架构的数据同步系统。

    一种分布式块存储的共享卷的数据读写方法及系统

    公开(公告)号:CN109683812A

    公开(公告)日:2019-04-26

    申请号:CN201811401375.3

    申请日:2018-11-22

    IPC分类号: G06F3/06 G06F9/455 H04L29/08

    摘要: 本发明公开了一种分布式块存储的共享卷的数据读写方法及系统,涉及分布式存储领域和云计算领域。本发明对分布式块存储的共享卷进行数据分片,在每个分片数据前增加版本号;存储客户端向存储服务器写数据时,先读取分片数据的版本号,对分片数据的版本号加1,并将待写入的数据、以及加1后的版本号同时发给存储服务器;存储服务器校验版本号,若检测到客户端写入数据的版本号等于或者小于存储服务器中的版本号,拒绝写入;否则,检验通过,允许数据写入,避免了并发读写带来的数据错误的问题,保证多个客户端同时对数据进行读写时数据的正确性,并且不需要应用程序做额外的保护。

    一种读写方法及终端
    4.
    发明公开

    公开(公告)号:CN109683810A

    公开(公告)日:2019-04-26

    申请号:CN201811382357.5

    申请日:2017-08-15

    发明人: 林大甲

    IPC分类号: G06F3/06 G06F11/14

    摘要: 本发明提供一种读写方法及终端,将冷数据磁盘分成前端磁盘组和后端磁盘组,前端磁盘组设置为上电状态,后端磁盘组设置为去电状态;接收文件写入请求,提取所述文件的关键信息;根据所述关键信息,获取所述文件的文件特征,分析所述文件特征,选择匹配的前端磁盘;将所述文件写入所述前端磁盘,并将所述文件的文件名、存储路径及其对应的关键信息存储至关键信息服务器,实现冷存储节能省电的同时保证数据的可靠性访问。

    一种基于对象存储的数据操作方法及相关装置

    公开(公告)号:CN109634526A

    公开(公告)日:2019-04-16

    申请号:CN201811513259.0

    申请日:2018-12-11

    发明人: 张露露

    IPC分类号: G06F3/06

    摘要: 本发明公开了一种基于对象存储的数据操作方法,会接收在客户端直接通过纠删码将对应目标对象的操作请求分成的多个操作子请求,以及对应该操作子请求的目标版本号,之后会判断多个对象存储单元中对应目标对象的当前版本号与目标版本号相同的个数是否大于预设个数;大于意味着此时可以执行操作子请求;并在操作子请求执行成功之后会将对象存储单元中对应目标对象的当前版本号进行更新。通过上述流程可以在分布式存储系统删除主OSD,有效提高分布式存储系统的性能;同时通过版本号比对的过程可以保障数据的正确和操作的正确执行。本发明还提供了一种数据操作装置、一种数据操作设备及一种计算机可读存储介质,同样具有上述有益效果。

    数据巡检方法、装置和分布式存储系统

    公开(公告)号:CN109614037A

    公开(公告)日:2019-04-12

    申请号:CN201811372562.3

    申请日:2018-11-16

    发明人: 刘浩

    IPC分类号: G06F3/06

    摘要: 本公开提供了一种数据巡检方法、装置和分布式存储系统,属于数据存储技术领域。其中,数据巡检方法应用于分布式存储系统中的存储节点,所述存储节点基于纠删码策略存储数据。本公开提供的数据巡检方法、装置和分布式存储系统,当存储节点接收到管理节点的巡检指令时,获取该存储节点存储的主数据分片对应的各个从存储节点,向各个从存储节点获取从数据分片的校验结果。该存储节点只需校验存储于本地的主数据分片,各个从存储节点只需向主存储节点发送校验结果,而无需将从数据分片发送至主存储节点,因此极大地降低了存储节点之间的数据传输量,减少了存储节点之间的网络消耗,有利于提升分布式存储系统的整体性能和保障用户业务的顺畅执行。

    一种文件存储方法及相关设备

    公开(公告)号:CN109445683A

    公开(公告)日:2019-03-08

    申请号:CN201811074811.0

    申请日:2018-09-14

    发明人: 陈全友 陈詹超

    IPC分类号: G06F3/06

    摘要: 本申请公开了一种文件存储方法及相关设备,包括:首先获取所述服务器的第一位置信息、以及与所述服务器相关联的多个存储器中每个存储器的第二位置信息;接着根据所述第一位置信息和所述第二位置信息,从所述多个存储器中选择目标存储器;然后将所述服务器中的目标文件存储于所述目标存储器。采用本申请实施例,可以在不增加带宽和存储器容量的前提下,提高文件的存取速率。