日志同步方法、装置、电子设备及存储介质

    公开(公告)号:CN118568166A

    公开(公告)日:2024-08-30

    申请号:CN202310232100.6

    申请日:2023-02-28

    发明人: 曹宇 王伟

    IPC分类号: G06F16/27 G06F11/14

    摘要: 本申请提供了一种日志同步方法、装置、电子设备及存储介质,属于数据库技术领域。该方法包括:存储系统存储主节点的日志;存储系统接收备节点的日志同步请求,基于该日志同步请求和日志,生成差分日志,向备节点发送该差分日志。上述方法中,由于存储系统中存储有主节点写入的日志,主节点和备节点所访问的是同一份日志,主节点不用对日志进行复制并传输,能够避免日志复制过程中产生的不一致,以及避免主节点和备节点之间的网络抖动带来的复制方式退化,进而降低丢失数据的风险。

    一种数据处理方法以及装置
    2.
    发明公开

    公开(公告)号:CN118245465A

    公开(公告)日:2024-06-25

    申请号:CN202211659096.3

    申请日:2022-12-22

    IPC分类号: G06F16/21 G06F3/06 G06F11/14

    摘要: 本申请提供一种数据处理的方法,利用内存中的undo log和内存中数据的最新版本获取数据的不同历史版本,通过重删压缩技术将数据的不同历史版本写入磁盘中。当内存中的数据丢失时,可以直接从非易失性介质中获取内存中丢失的数据的版本,而不再需要执行繁琐的恢复步骤,节约时间,有利于提升数据库系统的处理性能。非易失性介质是不同于内存的存储介质,例如是硬盘(磁盘、磁带、固态硬盘等)。此外,本申请还提供一种数据处理装置、数据库系统以及可读存储介质,其技术效果与上述方法的技术效果相对应。

    数据库系统、数据同步方法及相关设备

    公开(公告)号:CN115701600A

    公开(公告)日:2023-02-10

    申请号:CN202110881795.1

    申请日:2021-08-02

    IPC分类号: G06F16/23 G06F16/27

    摘要: 本申请提供了一种数据库系统、数据同步方法及相关设备,该系统包括主节点、从节点、及存储节点,其中,主节点用于根据数据更新请求,更新数据更新请求所访问的第一数据,生成第一数据的更新记录,并将更新记录发送至存储节点;存储节点用于将更新记录发送至从节点;从节点用于根据更新记录对第一数据进行更新。该方法可以在实现主节点和从节点数据一致性的同时,避免主节点频繁向从节点分发日志,进而降低主节点的处理压力,提高主节点的处理效率。

    一种数据存储方法及其设备
    4.
    发明公开

    公开(公告)号:CN114116188A

    公开(公告)日:2022-03-01

    申请号:CN202010886025.1

    申请日:2020-08-28

    发明人: 张学 范振勇 曹宇

    IPC分类号: G06F9/50 G06F9/48

    摘要: 本申请实施例公开了一种数据处理方法及其设备,用于计算与存储分离场景下。本申请实施例方法包括:计算设备获取存储系统的资源信息,资源信息表示存储系统的可调用的内部资源,计算设备根据资源信息对目标任务进行物理优化得到优化目标任务,目标任务为计算设备生成,计算设备向存储系统发送优化目标任务。本申请实施例中,计算设备通过获取存储系统的资源信息优化目标任务,提升了存储系统执行优化目标任务的效率。

    一种电子设备
    5.
    发明公开
    一种电子设备 审中-公开

    公开(公告)号:CN116919065A

    公开(公告)日:2023-10-24

    申请号:CN202210324760.2

    申请日:2022-03-29

    摘要: 本申请提供了一种电子设备,包括:表体203、与表体203连接的第一表带201和第二表带202、设置在第二表带202上的柔性基板207、设置在柔性基板207上的压力传感器阵列208以及第一部件206,第一部件206可活动的套设在第二表带202或者第一表带201上。用户使用电子设备测量脉搏波时,扣紧后的第一表带201或者第二表带202对第一部件206施加压力,第一部件206挤压表带上的压力传感器阵列208,压力传感器阵列208接触并测量用户脉搏处(例如桡动脉或者尺动脉)脉搏,从而得到脉搏波并显示在表体203上。其佩戴测量过程简便,施加在压力传感器上的压力由用户控制,随时可进行测量,使用方便。

    一种数据恢复方法及装置
    6.
    发明公开

    公开(公告)号:CN116266175A

    公开(公告)日:2023-06-20

    申请号:CN202210147651.8

    申请日:2022-02-17

    IPC分类号: G06F16/21 G06F16/23 G06F16/18

    摘要: 本申请提供一种数据恢复方法及装置,在该方法中,该装置获取用于请求访问第一数据页;若该第一数据页是脏数据页,则从存储器(存储有第一数据页及其他脏数据页的重做日志)中获取第一数据页的第一日志序列,第一日志序列包括第一数据页的一条或多条重做日志,其中一条重做日志记录有将对第一数据页执行的修改操作;重做所述第一日志序列以恢复第一数据页,并利用恢复后的第一数据页提供服务。在本申请中,可以按需恢复数据页,如恢复被请求访问的第一数据页,并且在恢复第一数据页时,重做第一日志序列即可,无需重做其他脏数据页的重做日志,在不增加硬件成本的前提下,降低恢复耗时,同时也降低了对业务的影响。

    存储文件的方法和装置
    7.
    发明授权

    公开(公告)号:CN103797455B

    公开(公告)日:2016-11-30

    申请号:CN201380002592.4

    申请日:2013-11-06

    发明人: 曹宇

    IPC分类号: G06F3/06 G06F11/10

    摘要: 本发明公开了一种存储文件的方法和装置。该方法包括:确定待存储的文件的数据块的个数T,T为正整数;若T小于N,则按照冗余关系将该文件组织为包括N个数据块和M个校验块的数据块集合,其中,该N个数据块包括该文件的T个数据块以及无效数据块,该无效数据块中的数据为零,N和M为正整数;存储该文件的T个数据块和该M个校验块。本发明实施例的存储文件的方法和装置,能够节省存储空间和提高读写效率。

    数据处理方法和装置
    8.
    发明公开

    公开(公告)号:CN103064926A

    公开(公告)日:2013-04-24

    申请号:CN201210562653.X

    申请日:2012-12-21

    发明人: 曹宇

    IPC分类号: G06F17/30 G06F3/06

    摘要: 本发明实施例提供一种数据处理方法和装置,通过将待存储文件分成至少一个数据单元,每个数据单元的大小不超过数据单元阈值;将待存储文件的第一个数据单元存储在高性能存储介质中。对于文件大小不超过数据单元阈值的小文件,则可以整个存储在高性能存储介质中,从而可以加速对小文件的访问速度,提高文件的访问效率。

    数据访问方法、装置、存储系统及存储介质

    公开(公告)号:CN117234409A

    公开(公告)日:2023-12-15

    申请号:CN202210639666.6

    申请日:2022-06-07

    发明人: 谭春华 王伟 曹宇

    IPC分类号: G06F3/06

    摘要: 本申请实施例公开了一种数据访问方法、装置、存储系统及存储介质,属于数据存储技术领域。在本申请实施例中,存储系统中的存储节点不仅存储有数据页,还可以接收计算节点对存储的数据页的权限请求,并为该计算节点分配访问权限。也即,在本申请实施例中,数据页的权限管理功能从计算节点卸载至存储该数据页的存储节点上,这样,即使某个计算节点发生了故障,也不需要重新选取主计算节点,其他计算节点依然可以通过该存储系统中的存储节点来申请访问权限,提高了系统的可用性。

    一种存储系统、数据处理方法及相关设备

    公开(公告)号:CN115904211A

    公开(公告)日:2023-04-04

    申请号:CN202110931054.X

    申请日:2021-08-13

    IPC分类号: G06F3/06 G06F13/16

    摘要: 本申请提供了一种存储系统、数据处理方法以及相关设备,存储系统包括第一计算节点和存储节点,第一计算节点中包括记录有一段时间内对第一数据页所做的修改的第一日志;存储节点中存储有第一数据页,存储节点在需要获取第一数据页对应的新数据时,发送获取请求至第一计算节点;第一计算节点在接收到获取请求后,根据第一日志获取包括一段时间内对所述第一数据页所做的修改的第二数据页;然后将第二数据页发送至存储节点。通过计算节点实现根据数据页与重做日志进行回放得到新的数据页,能够利用计算节点的空闲资源,提高存储节点获取新数据的效率,降低存储节点进行回放时占用的资源。