-
公开(公告)号:CN120030000A
公开(公告)日:2025-05-23
申请号:CN202510241409.0
申请日:2025-03-03
Applicant: 中国南方电网有限责任公司
Abstract: 一种多模态分布式数据库的处理方法、装置、设备、存储介质及程序产品,其方法包括:响应于业务处理请求,基于业务处理请求中包括的待处理业务对应的业务需求和数据特点,确定待处理业务的业务类型;在业务类型为联机事务处理业务的情况下,将待处理业务对应的数据写入行存储引擎,并基于预先确定的复制算法,将数据从行存储引擎复制到列存储引擎;实时或周期性获取行存储引擎和列存储引擎分别对应的每个工作节点的运行状态信息和数据信息;在基于运行状态信息和/或数据信息确定存在故障工作节点的情况下,基于数据副本或历史日志记录,对故障工作节点中的数据进行数据同步恢复处理。采用该方法,可提高多模态分布式数据库的整体性能。
-
公开(公告)号:CN119759940A
公开(公告)日:2025-04-04
申请号:CN202411928580.0
申请日:2024-12-25
Applicant: 中国南方电网有限责任公司
IPC: G06F16/242 , G06F16/2452 , G06F16/2453 , G06F16/28
Abstract: 本申请公开了一种分布式数据库的数据查询方法、装置、设备、存储介质及程序产品,其中方法包括:响应于查询请求,对查询请求中的查询语句进行解析,生成查询计划;查询计划包含多个查询算子,每个查询算子对应数据查询操作的一个查询阶段;基于各个查询算子的特性和分布式数据库的数据分布信息,从查询计划包含的多个查询算子中确定出候选算子;基于预设的下推条件,从候选算子中确定出目标算子;目标算子为可在分布式数据库的存储引擎中执行查询的算子;基于目标算子,对查询计划进行优化,生成优化的查询计划;优化的查询计划中目标算子下推至存储引擎执行查询,其他算子在查询引擎执行查询。采用该方法,可提高分布式数据库的性能。
-
公开(公告)号:CN120067223A
公开(公告)日:2025-05-30
申请号:CN202510190152.0
申请日:2025-02-20
Applicant: 中国南方电网有限责任公司
Abstract: 本申请涉及一种跨引擎数据的处理方法、装置、计算机设备、计算机可读存储介质和计算机程序产品。所述方法包括:确定待写入到分布式数据库系统中的目标数据;分布式数据库系统包括行存储引擎对应的第一数据库和列存储引擎对应的第二数据库;通过行存储引擎,将目标数据更新到第一数据库中;确定针对目标数据的属性信息对应配置的跨引擎同步触发条件;在满足跨引擎同步触发条件的情况下,按照行存储引擎与列存储引擎之间的数据索引关系,将目标数据同步到第二数据库中,能够确保目标数据在两个存储引擎中的结构和索引保持一致,有利于保证数据在行存储引擎和列存储引擎之间的一致性。
-
公开(公告)号:CN120045587A
公开(公告)日:2025-05-27
申请号:CN202510171181.2
申请日:2025-02-17
Applicant: 中国南方电网有限责任公司
IPC: G06F16/2453 , G06F16/2455 , G06F16/242 , G06F16/27 , G06F16/248
Abstract: 一种分布式数据库的数据查询方法、装置、设备、存储介质及程序产品,其方法包括:基于分布式集群中每两个工作节点间的数据传输时延、每个工作节点的算力资源和数据存储布局信息,构建查询计划评估模型;在接收到查询请求的情况下,调用查询计划评估模型,对基于查询请求生成的多个查询计划分别进行评估,并基于评估结果,从多个查询计划中确定出目标查询计划;确定待查询数据在分布式集群中所处的至少一个目标工作节点;基于预设的下推策略,将目标查询计划包含的各个查询算子下推至待查询数据所处的各个目标工作节点,以使各个目标工作节点基于目标查询计划执行各个查询算子,得到数据查询结果。采用该方法,可提高分布式数据库的数据查询效率。
-
公开(公告)号:CN120029721A
公开(公告)日:2025-05-23
申请号:CN202510241394.8
申请日:2025-03-03
Applicant: 中国南方电网有限责任公司
Abstract: 本申请涉及一种多版本并发控制的事务处理方法、装置和计算机设备。所述方法包括:在接收到事务处理请求的情况下,获取数据版本信息表;数据版本信息表中包括历史版本标识和历史事务标识;按照事务隔离规则,从数据版本信息表中确定至少一个候选版本标识;基于事务处理请求和各个历史事务标识各自的历史事务请求之间的事务相关性,从至少一个候选版本标识中确定目标版本标识;将事务处理请求和目标版本标识发送至事务处理请求对应的事务执行节点,以指示事务执行节点分别按照事务处理请求针对原始数据进行事务处理,得到并返回目标数据;接收目标数据,并根据目标数据,得到事务处理请求的事务处理结果,有利于提高事务的处理精度和准确度。
-
公开(公告)号:CN119739789A
公开(公告)日:2025-04-01
申请号:CN202411916648.3
申请日:2024-12-24
Applicant: 中国南方电网有限责任公司
IPC: G06F16/27 , G06F16/2455
Abstract: 本申请公开了一种多模态数据库跨引擎并行处理方法、装置、设备及介质,应用于部署有分布式数据库的分布式集群中的数据库管理节点,其中方法包括:响应于跨节点分布式事务指令,向分布式集群中的用于管理多个分区数据库的事务管理节点发送事务执行命令;多个分区数据库包括支持多种数据类型和存储引擎的多模态数据库;事务执行命令用于指示获取多个分区数据库的运行信息;在接收到事务管理节点发送的运行信息的情况下,将运行信息发送至分布式集群中的信息存储节点,以使得信息存储节点将目标存储信息数据更新为运行信息。采用该方法,可在高并发实时交易的场景下,提高针对数据库的处理速度。
-
公开(公告)号:CN120067570A
公开(公告)日:2025-05-30
申请号:CN202510079600.X
申请日:2025-01-18
Applicant: 中国南方电网有限责任公司
IPC: G06F18/20 , G06F18/10 , G06F18/15 , G06F18/213 , G06F18/211 , G06F18/25 , G06F21/62 , G06N3/096 , G06N3/098 , G06N3/045 , G06N3/0495 , G06N3/094 , G06Q50/06
Abstract: 本发明公开了一种结合迁移学习异构特征评估方法,包括以下步骤:S1、异构数据源识别与预处理;S2、特征空间映射;S3、特征选择与评估;S4、联邦学习框架构建;S5、模型融合与优化;S6、隐私保护技术应用;S7、实时反馈与迭代优化;S8、跨领域知识迁移探索;S9、案例研究与实证分析;针对异构数据源的融合难题,通过特征空间映射和领域自适应技术,有效地统一了不同数据源的特征表示,利用LASSO回归基于模型的特征选择技术,精确地识别出对预测任务最为关键的特征;联邦学习框架的引入允许多个参与者协作训练模型,而无需共享原始数据,这为数据共享提供了新的解决方案。
-
公开(公告)号:CN119719075A
公开(公告)日:2025-03-28
申请号:CN202411891944.2
申请日:2024-12-20
Applicant: 中国南方电网有限责任公司
IPC: G06F16/21
Abstract: 本申请公开了一种异构数据迁移方法、装置、设备、存储介质及程序产品,其中方法包括:对源数据库进行识别,得到源数据库对应的数据库信息;数据库信息包括源数据库的类型信息和版本信息;对源数据库中的元数据进行解析,得到源数据库对应的数据库结构信息和元数据对应的数据依赖关系;基于数据库信息、数据库结构信息以及数据依赖关系,将源数据库的数据模型转换为目标数据库兼容的数据模型,得到转换后的数据;基于预先确定的目标迁移策略,将转换后的数据从源数据库迁移到目标数据库。采用该方法,可提高数据迁移的可靠性。
-
-
-
-
-
-
-