一种数据库数据迁移系统

    公开(公告)号:CN108153774A

    公开(公告)日:2018-06-12

    申请号:CN201611105061.X

    申请日:2016-12-05

    Inventor: 曲立辉

    CPC classification number: G06F16/214

    Abstract: 本发明公开了一种数据库数据迁移系统,其特征在于所述系统包括设置在源数据库端的数据库查看模块、对数据库数据内容变更情况进行监听的数据库监听模块和对数据库的结构和数据记录进行复制,形成SQL文件的数据库备份模块;所述数据库查看模块对源数据库的结构和数据进行查看后,数据库备份模块将相应的数据和数据库结构根据SQL命令规范形成SQL文件,由数据库备份模块输出备份;当数据库监听模块监听到数据库数据内容变更时,启动数据库备份模块对变更内容进行备份,并替换相应SQL文件中内容。本发明通过数据库备份模块的设置,通过更新模块执行使数据库的迁移工作方便易行。

    数据搬迁系统及方法
    2.
    发明公开

    公开(公告)号:CN107870960A

    公开(公告)日:2018-04-03

    申请号:CN201710493334.0

    申请日:2017-06-25

    Inventor: 刘四根

    CPC classification number: G06F16/214 G06F16/215 G06F16/2282

    Abstract: 本发明提供了一种数据搬迁方法。该数据搬迁方法包括:数据划分步骤:将数据库存储的第一数据表划分为多个数据块;及数据搬迁步骤:调用多个线程从该第一数据表中读取该多个数据块,写入第二数据表。第一数据表、第二数据表存储于数据库中。使用该方法能提高数据搬迁时效性。本发明还提供一种数据搬迁系统。

    一种面向云存储的分层索引方法与检索方法

    公开(公告)号:CN106599040A

    公开(公告)日:2017-04-26

    申请号:CN201610975816.5

    申请日:2016-11-07

    CPC classification number: G06F16/27 G06F16/214 G06F16/2264

    Abstract: 本发明涉及一种面向云存储的分层索引方法与检索方法。针对云存储环境中海量数据分布组织管理的特点,本发明建立一种分层索引结构:顶层为全局索引,该索引以数据的不同属性形成维度,为每个维度以散列倒排的方式建立取值与分页之间的映射关系;在底层的局部索引中建立与上层维度取值对应的索引,实现与本地存储分页中数据的映射。该索引结构的平衡性与扩展性较好,具有查询执行效率受数据集规模影响较小的特点,且支持多维与布尔查询;同时,在云环境节点发生变换时,仅在全局索引进行节点迁移的维护工作,索引维护较为简单,能够满足云存储环境的要求。本发明在分布式数据库领域具有积极的应用价值。

    一种数据迁移的验证方法及装置

    公开(公告)号:CN106484690A

    公开(公告)日:2017-03-08

    申请号:CN201510523796.3

    申请日:2015-08-24

    Inventor: 唐志慧

    CPC classification number: G06F16/214 G06F16/2365

    Abstract: 本申请涉及电子技术领域,特别涉及一种数据迁移的验证方法及装置,其中方法包括当数据由A端迁移到B端的过程中,对迁移的每一行数据进行运算,得到每一行数据对应的标识符;将所述标识符与其相对应的一行数据一起迁移至B端;计算迁移过程中所有行数据对应的标识符的和,得到第一值,并计算B端所有行数据对应的标识符的和,得到第二值;当所述第一值和所述第二值相等时,所述数据迁移验证通过。本申请实施例还提供了执行上述方法的装置,对于数据迁移过程中出现的丢行、行数据重复等问题的数据验证具有极高的工作效率。

    一种支撑智慧金融的数据预处理方法和装置

    公开(公告)号:CN106227776A

    公开(公告)日:2016-12-14

    申请号:CN201610563824.9

    申请日:2016-07-18

    Inventor: 曾立军 吴永才

    CPC classification number: G06F16/214 G06Q40/025

    Abstract: 本发明公开了一种支撑智慧金融的数据预处理方法和装置,所述方法包括:获取金融数据,并将所述金融数据存储在源系统的第一数据库;将所述第一数据库中的金融数据迁移到目标系统;将目标系统中的金融数据进行分类。本发明对获得的原始金融数据进行预处理,将金融数据迁移到目标系统中,并将金融数据转换为统一格式,然后再根据金融数据的类型将金融数据进行分类,有利于提高金融数据的后续处理效率。

    大数据的处理方法和系统

    公开(公告)号:CN105677710A

    公开(公告)日:2016-06-15

    申请号:CN201511001368.0

    申请日:2015-12-28

    CPC classification number: G06F16/214 G06F16/258

    Abstract: 本发明公开了一种大数据的处理方法和系统,该方法包括:从多个数据源抽取大数据,并对大数据进行规则转换;对进行规则转换后的大数据进行数据处理;根据数据处理后的大数据建立数据库。本发明通过从多源异构数据中分析出各类信息并构建数据库,从而为各类数据分析、行为分析、用户画像分析、关系发现提供数据支撑。

    一种工业实时数据分级存储及迁移方法

    公开(公告)号:CN105653591A

    公开(公告)日:2016-06-08

    申请号:CN201510969294.3

    申请日:2015-12-22

    CPC classification number: G06F16/214 G06F16/22

    Abstract: 本发明提供了一种工业实时数据分级存储及迁移方法及其系统,该方法包括:定期监控分级存储系统,当高级存储设备的存储容量使用率达到预设的第一阈值后,触发数据迁移计算;迁移时,首先对存储设备中的每个数据对象进行价值评定,得到每个数据对象的价值并根据价值大小对数据对象进行排序;根据排序设置迁移策略并将待迁移的数据对象选出,组成迁移队列并进行迁移。该方法及系统按存储设备优先级的不同及当前数据对象的价值排序设置迁移策略,其中,价值计算考虑了影响数据对象迁移效率的时间因素、访问用户数量、与其关联的其他数据对象情况、不同存储设备的访问对比度及数据对象本身大小,使得该方法提高了数据价值判定的准确性。

Patent Agency Ranking