数据存储方法、装置、服务器及存储介质

    公开(公告)号:CN110209343B

    公开(公告)日:2021-12-14

    申请号:CN201810814260.0

    申请日:2018-07-23

    IPC分类号: G06F3/06

    摘要: 本发明公开了一种数据存储方法、装置、服务器及存储介质,属于互联网技术领域。所述方法包括:当接收到对第一数据的写入请求时,查询第二数据的存储位置;当查询到第二数据存储在第一缓存单元时,将第一数据存储到第二缓存单元中;返回对第一数据的写入结果。本发明基于第一缓存单元和第二缓存单元对数据进行存储,相比于单独采用第二缓存单元的数据存储方式,节省了成本,对于已存储在第一缓存单元中的数据,当再次对该数据进行存储时,将该数据存储到第二缓存单元,不仅提高了数据读写速度,而且减少了对第一缓存单元的数据写入次数,避免了第一缓存单元损坏,提高了数据安全性,该种方式兼顾了成本、数据读写速度及安全性等方面的需求。

    数据写入方法、装置及存储服务器和计算机可读存储介质

    公开(公告)号:CN111104066A

    公开(公告)日:2020-05-05

    申请号:CN201911304631.1

    申请日:2019-12-17

    IPC分类号: G06F3/06

    摘要: 本申请公开了一种数据写入方法、装置及一种存储服务器和计算机可读存储介质,该方法包括:当接收到写入请求时,将所述写入请求对应的写入数据写入写缓冲区中;当触发所述写缓冲区的数据下刷操作时,获取所述待下刷数据对应的数据块的历史访问数据;基于所述历史访问数据判断待下刷数据是否为只写数据;若是,则将所述待下刷数据写入硬盘驱动器中;若否,则将所述待下刷数据写入缓存中。本申请提供的数据写入方法,可以有效减少写入缓存的无用流量,同时在缓存中为普通数据留出更多空间,提高缓存空间利用率,从而提高缓存的读取命中率,提升存储系统的读性能,实现了对缓存的最低写入流量,提高了写策略的效率。

    数据写入方法、装置及存储服务器和计算机可读存储介质

    公开(公告)号:CN111104066B

    公开(公告)日:2021-07-27

    申请号:CN201911304631.1

    申请日:2019-12-17

    IPC分类号: G06F3/06

    摘要: 本申请公开了一种数据写入方法、装置及一种存储服务器和计算机可读存储介质,该方法包括:当接收到写入请求时,将所述写入请求对应的写入数据写入写缓冲区中;当触发所述写缓冲区的数据下刷操作时,获取所述待下刷数据对应的数据块的历史访问数据;基于所述历史访问数据判断待下刷数据是否为只写数据;若是,则将所述待下刷数据写入硬盘驱动器中;若否,则将所述待下刷数据写入缓存中。本申请提供的数据写入方法,可以有效减少写入缓存的无用流量,同时在缓存中为普通数据留出更多空间,提高缓存空间利用率,从而提高缓存的读取命中率,提升存储系统的读性能,实现了对缓存的最低写入流量,提高了写策略的效率。

    数据存储方法、装置、服务器及存储介质

    公开(公告)号:CN110209343A

    公开(公告)日:2019-09-06

    申请号:CN201810814260.0

    申请日:2018-07-23

    IPC分类号: G06F3/06

    摘要: 本发明公开了一种数据存储方法、装置、服务器及存储介质,属于互联网技术领域。所述方法包括:当接收到对第一数据的写入请求时,查询第二数据的存储位置;当查询到第二数据存储在第一缓存单元时,将第一数据存储到第二缓存单元中;返回对第一数据的写入结果。本发明基于第一缓存单元和第二缓存单元对数据进行存储,相比于单独采用第二缓存单元的数据存储方式,节省了成本,对于已存储在第一缓存单元中的数据,当再次对该数据进行存储时,将该数据存储到第二缓存单元,不仅提高了数据读写速度,而且减少了对第一缓存单元的数据写入次数,避免了第一缓存单元损坏,提高了数据安全性,该种方式兼顾了成本、数据读写速度及安全性等方面的需求。

    流量控制方法、装置及系统
    5.
    发明公开

    公开(公告)号:CN112165436A

    公开(公告)日:2021-01-01

    申请号:CN202011101957.7

    申请日:2020-10-15

    IPC分类号: H04L12/825 H04L29/08

    摘要: 本申请涉及流量控制方法、装置及系统,所述方法包括:在当前周期内,响应于针对待访问虚拟存储区域的业务访问请求,确定存储集群中与所述待访问虚拟存储区域对应的目标预设存储区域;确定与所述目标预设存储区域对应的目标单连接;通过所述目标单连接将所述业务访问请求发送给所述存储集群;接收所述存储集群通过所述目标单连接反馈的请求处理异常状态信息;基于在所述当前周期内通过所述目标单连接反馈的至少一项所述请求处理异常状态信息,调整通过所述目标单连接向所述存储集群发送业务访问请求的数量。本申请能够实时进行调整流量以避免因瞬时高流量导致的系统功能异常,并且流量控制粒度小,从而提高了流量控制的精确度。

    流量控制方法、装置及系统

    公开(公告)号:CN112165436B

    公开(公告)日:2024-02-20

    申请号:CN202011101957.7

    申请日:2020-10-15

    摘要: 本申请涉及流量控制方法、装置及系统,所述方法包括:在当前周期内,响应于针对待访问虚拟存储区域的业务访问请求,确定存储集群中与所述待访问虚拟存储区域对应的目标预设存储区域;确定与所述目标预设存储区域对应的目标单连接;通过所述目标单连接将所述业务访问请求发送给所述存储集群;接收所述存储集群通过所述目标单连接反馈的请求处理异常状态信息;基于在所述当前周期内通过所述目标单连接反馈的至少一项所述请求处理异常状态信息,调整通过所述目标单连接向所述存储集群发送业务访问请求的数量。本申请能够实时进行调整流量以避免因瞬时高流量导致的系统功能异常,并且流量控制粒度小,从而提高了流量控制的精确度。

    一种流量控制的方法、相关装置、设备以及存储介质

    公开(公告)号:CN111131063B

    公开(公告)日:2022-03-25

    申请号:CN201911415718.6

    申请日:2019-12-31

    发明人: 胡健鹰 邢小云

    IPC分类号: H04L47/10

    摘要: 本申请公开了一种流量控制的方法、相关装置、设备以及存储介质,用于避免因无差别流量控制而造成重要业务被限制过大的问题,从而提升流量控制的准确性。本申请方法包括:获取目标存储资源集合所对应的第一性能参数;若第一性能参数大于或等于第一性能阈值,则获取目标存储资源集合所对应的M个第二性能参数;根据M个第二性能参数,从目标存储资源集合中确定待限流存储资源集合,其中待限流存储资源集合中包括P个待限流存储资源;若待限流存储资源集合中的第一限流存储资源属于第一业务,则按照第一流量阈值对第一限流存储资源进行流量控制,其中M为大于或等于1的整数,P为大于或等于1,且小于M的整数。

    一种流量控制的方法、相关装置、设备以及存储介质

    公开(公告)号:CN111131063A

    公开(公告)日:2020-05-08

    申请号:CN201911415718.6

    申请日:2019-12-31

    发明人: 胡健鹰 邢小云

    IPC分类号: H04L12/801

    摘要: 本申请公开了一种流量控制的方法、相关装置、设备以及存储介质,用于避免因无差别流量控制而造成重要业务被限制过大的问题,从而提升流量控制的准确性。本申请方法包括:获取目标存储资源集合所对应的第一性能参数;若第一性能参数大于或等于第一性能阈值,则获取目标存储资源集合所对应的M个第二性能参数;根据M个第二性能参数,从目标存储资源集合中确定待限流存储资源集合,其中待限流存储资源集合中包括P个待限流存储资源;若待限流存储资源集合中的第一限流存储资源属于第一业务,则按照第一流量阈值对第一限流存储资源进行流量控制,其中M为大于或等于1的整数,P为大于或等于1,且小于M的整数。

    模型训练方法、故障定位方法、装置及存储介质

    公开(公告)号:CN115329840A

    公开(公告)日:2022-11-11

    申请号:CN202210804224.2

    申请日:2022-07-07

    IPC分类号: G06K9/62 G06F11/32 G06F11/34

    摘要: 本申请提供了一种模型训练方法、故障定位方法、装置及存储介质,该训练方法包括:获取存储服务器集群的多条输入输出记录信息和多条输入输出记录信息对应的组件故障真实结果;确定存储服务器集群中产生每条输入输出记录信息的目标存储服务器,获取目标存储服务器的各个组件的信息,根据各个组件的信息获取各个组件在预设时长内的运行日志和运营数据,根据运行日志和运营数据生成目标向量,将目标向量输入目标神经网络模型,得到每条输入输出记录信息对应的组件故障预测结果;基于多条输入输出记录信息对应的组件故障真实结果和组件故障预测结果训练目标神经网络模型,从而可以通过该模型自动实现故障定位,进而可以提高故障定位效率和精度。