一种批量创建文件的方法、装置、设备及存储介质

    公开(公告)号:CN111046001B

    公开(公告)日:2023-03-14

    申请号:CN201911385174.3

    申请日:2019-12-28

    Inventor: 刘洪栋 张立强

    Abstract: 本发明公开了一种批量创建文件的方法、装置、设备及存储介质,该方法包括:接收目的客户端发送的授权请求,并确定与授权请求对应的目录为指定目录;判断指定目录是否已被授权给除目的客户端之外的其他客户端,如果是,则等待直至完成与对指定目录具有权限的客户端对应全部文件的批量创建后,释放指定目录,将指定目录授权给目的客户端,如果否,则将指定目录授权给目的客户端;接收目的客户端发送的多个创建请求,基于接收的创建请求实现相应的多个文件的同时创建,存储创建得到的每个文件的元数据,并在完成目的客户端对应全部文件的批量创建后释放指定目录。本申请能够提高文件创建性能,提高分布式文件系统的性能。

    一种纠删池选择方法、装置、电子设备及存储介质

    公开(公告)号:CN115934001A

    公开(公告)日:2023-04-07

    申请号:CN202310214137.6

    申请日:2023-03-08

    Abstract: 本发明提供一种纠删池选择方法、装置、电子设备及存储介质,涉及存储领域,方法包括:当接收到待存储的文件时,确定文件对应的目标目录,并确定目标目录在存储系统中对应的多个候选纠删池;各候选纠删池对应的纠删等级中存在至少两种不同的纠删等级;确定各候选纠删池对应的故障状态,并根据故障状态为未故障的候选纠删池对应的纠删等级及剩余容量,在故障状态为未故障的候选纠删池中选择目标数据池;将文件写入目标数据池;可为文件目录列表中的目录设置多个候选纠删池,进而在进行文件写入时,可在该文件所要写入的目录对应的候选纠删池中优先选择未故障、纠删等级高及剩余容量大的纠删池进行写入,从而可有效保证数据存储的可靠性。

    元数据路径信息存取方法、装置、设备及可读存储介质

    公开(公告)号:CN110659334A

    公开(公告)日:2020-01-07

    申请号:CN201910893940.0

    申请日:2019-09-20

    Inventor: 刘洪栋 张立强

    Abstract: 本发明公开了一种元数据路径信息存取方法,包括:对接收到的元数据路径信息存取请求进行解析,得到各待存取元数据路径信息分别对应的目标元数据号;从预创建的元数据号聚合表中查找各目标元数据号分别对应的目标对象id号;各元数据号与各对象id号为多对一关系;分别查找各目标对象id号对应的目标对象数据库;将对应同一目标对象id号的各待存取元数据路径信息与相应的目标对象数据库进行统一存储和/或读取交互操作。应用本发明实施例所提供的技术方案,较大地提高了元数据路径信息存取效率,提升了元数据的操作性能。本发明还公开了一种元数据路径信息存取装置、设备及存储介质,具有相应技术效果。

    一种元数据子树迁移方法、装置、设备及可读存储介质

    公开(公告)号:CN110659249A

    公开(公告)日:2020-01-07

    申请号:CN201910911892.3

    申请日:2019-09-25

    Inventor: 刘洪栋 张立强

    Abstract: 本发明公开了一种元数据子树迁移方法、装置、设备及可读存储介质,该方法包括以下步骤:监控元数据子树的冷热状态,并获取元数据子树的总数量;判断总数量是否大于预设回迁阈值;如果是,则利用冷热状态确定出待回迁的目标元数据子树,并回迁目标元数据子树。该方法,通过在元数据子树的总数量达到预设回迁阈值时,进行回迁操作,可使得元数据子树的总数量限制在一定数量范围内,可避免因元数据子树的数量过多而导致增加额外的计算,可避免因元数据子树的数量过多而影响业务性能。

    一种纠删池选择方法、装置、电子设备及存储介质

    公开(公告)号:CN115934001B

    公开(公告)日:2023-05-12

    申请号:CN202310214137.6

    申请日:2023-03-08

    Abstract: 本发明提供一种纠删池选择方法、装置、电子设备及存储介质,涉及存储领域,方法包括:当接收到待存储的文件时,确定文件对应的目标目录,并确定目标目录在存储系统中对应的多个候选纠删池;各候选纠删池对应的纠删等级中存在至少两种不同的纠删等级;确定各候选纠删池对应的故障状态,并根据故障状态为未故障的候选纠删池对应的纠删等级及剩余容量,在故障状态为未故障的候选纠删池中选择目标数据池;将文件写入目标数据池;可为文件目录列表中的目录设置多个候选纠删池,进而在进行文件写入时,可在该文件所要写入的目录对应的候选纠删池中优先选择未故障、纠删等级高及剩余容量大的纠删池进行写入,从而可有效保证数据存储的可靠性。

    一种固态硬盘寿命到期处理方法、装置及介质

    公开(公告)号:CN116028312A

    公开(公告)日:2023-04-28

    申请号:CN202310166810.3

    申请日:2023-02-27

    Abstract: 本申请公开了一种固态硬盘寿命到期处理方法、装置及介质,涉及分布式存储技术领域。通过监测固态硬盘数据池中各固态硬盘的使用情况;根据使用情况判断对应的固态硬盘是否达到使用寿命;若是,则将新创建的文件写入其他数据池中,并将达到使用寿命的固态硬盘中的文件迁移至其他数据池中。由此可知,上述方案通过监测固态硬盘数据池中固态硬盘的使用寿命,当确认固态硬盘达到使用寿命时,保证新的数据不再写入寿命到期的固态硬盘数据池,并且将已经存储在该固态硬盘的文件迁移到其他数据池。解决了多个固态硬盘同时故障导致的集群不可用,甚至文件系统数据丢失的问题,能够极大的维护数据的安全,保证文件系统的稳定性。

    一种基于删除队列的分布式数据删除方法、装置及设备

    公开(公告)号:CN111625506A

    公开(公告)日:2020-09-04

    申请号:CN202010471507.0

    申请日:2020-05-29

    Inventor: 刘洪栋 肖国栋

    Abstract: 本申请公开了一种基于删除队列的分布式数据删除方法,包括:根据待删除文件对象生成删除信息项;将删除信息项追加至删除队列;将删除队列以日志文件的形式进行落盘,并在落盘完成后向业务层发送删除完成的消息;根据落盘后的删除队列,执行异步删除操作。可见,该方法引入删除队列,采用日志文件方式记录删除队列,实现异步删除操作,避免大数据计算场景下中间结果的删除任务对计算过程的影响,提升分布式集群的计算性能。此外,本申请还提供了一种基于删除队列的分布式数据删除装置、设备及可读存储介质,其技术效果与上述方法的技术效果相对应。

    一种批量创建文件的方法、装置、设备及存储介质

    公开(公告)号:CN111046001A

    公开(公告)日:2020-04-21

    申请号:CN201911385174.3

    申请日:2019-12-28

    Inventor: 刘洪栋 张立强

    Abstract: 本发明公开了一种批量创建文件的方法、装置、设备及存储介质,该方法包括:接收目的客户端发送的授权请求,并确定与授权请求对应的目录为指定目录;判断指定目录是否已被授权给除目的客户端之外的其他客户端,如果是,则等待直至完成与对指定目录具有权限的客户端对应全部文件的批量创建后,释放指定目录,将指定目录授权给目的客户端,如果否,则将指定目录授权给目的客户端;接收目的客户端发送的多个创建请求,基于接收的创建请求实现相应的多个文件的同时创建,存储创建得到的每个文件的元数据,并在完成目的客户端对应全部文件的批量创建后释放指定目录。本申请能够提高文件创建性能,提高分布式文件系统的性能。

Patent Agency Ranking