一种基于Debezium内嵌引擎的数据同步方法

    公开(公告)号:CN118410109A

    公开(公告)日:2024-07-30

    申请号:CN202410883948.X

    申请日:2024-07-03

    摘要: 本发明公开了一种基于Debezium内嵌引擎的数据同步方法,涉及数据处理技术领域。为了解决现有技术中的数据同步方法存在同步效率低下、无法适应多种数据目标系统、数据时序性无法保证的问题;一种基于Debezium内嵌引擎的数据同步方法,包括标记映射关系与集合;实时数据捕捉与缓存队列解耦;存量数据同步;数据结构映射关系更新;批量反查主键ID;数据批量同步与时序性保证;通过分片多通道两级缓存队列解耦,能够并行同步数据到多个不同数量不同种类数据目标系统的不同数据库表,实现了数据的高效、灵活和时序性同步,缓解了源数据背压,提高了数据同步的稳定性,适应多种数据目标系统,并保证了数据的准确性和时序性。

    基于车辆弹簧形变传感器计算车载实时载重的装置、方法

    公开(公告)号:CN116202605A

    公开(公告)日:2023-06-02

    申请号:CN202310428317.4

    申请日:2023-04-20

    IPC分类号: G01G19/08

    摘要: 本发明提供基于车辆弹簧形变传感器计算车载实时载重的装置、方法,包括步骤:根据设置于目标车辆四周的至少一个信息采集设备获取当前目标车辆的形变数据;构建数据过滤机制筛选排除目标车辆在运动状态下的颠簸形变数据,以得到信息采集设备非异常状态下获取的新形变数据;基于低阶函数对新形变数据进行特征信息比对,拟合得到当前目标车辆的实际重量值。本发明通过车载传感器实时感知货车板簧形变值,利用车载主机搜集到的各传感器数据对这些数据进行加工计算从而转化成车载载重值后,使得司机或企业实时感知货车载重值,感知车辆在运输中装卸货行为,从装货源头防止超载,为监管部门提供车辆超载数据,提供精准的车辆运输统计。

    一种基于Debezium内嵌引擎的数据同步方法

    公开(公告)号:CN118410109B

    公开(公告)日:2024-11-05

    申请号:CN202410883948.X

    申请日:2024-07-03

    摘要: 本发明公开了一种基于Debezium内嵌引擎的数据同步方法,涉及数据处理技术领域。为了解决现有技术中的数据同步方法存在同步效率低下、无法适应多种数据目标系统、数据时序性无法保证的问题;一种基于Debezium内嵌引擎的数据同步方法,包括标记映射关系与集合;实时数据捕捉与缓存队列解耦;存量数据同步;数据结构映射关系更新;批量反查主键ID;数据批量同步与时序性保证;通过分片多通道两级缓存队列解耦,能够并行同步数据到多个不同数量不同种类数据目标系统的不同数据库表,实现了数据的高效、灵活和时序性同步,缓解了源数据背压,提高了数据同步的稳定性,适应多种数据目标系统,并保证了数据的准确性和时序性。