-
公开(公告)号:CN106855805A
公开(公告)日:2017-06-16
申请号:CN201610963367.2
申请日:2016-11-04
申请人: 国网浙江省电力公司 , 北京国电通网络技术有限公司 , 国网信息通信产业集团有限公司
CPC分类号: G06F8/20 , G06F9/44505
摘要: 本发明公开了一种大数据的流处理方法,属于大数据应用领域,具体包括:当用户向YARN中提交一个应用程序后,YARN将分两个阶段运行该应用程序,第一个阶段是启动ApplicationMaster;第二个阶段是由ApplicationMaster创建应用程序,为它申请资源,并监控它的整个运行过程,直到运行完成。本发明的大数据的流处理方,具有高可靠性、高扩展性、高效性和高容错性。
-
公开(公告)号:CN106855877A
公开(公告)日:2017-06-16
申请号:CN201610963366.8
申请日:2016-11-04
申请人: 国网浙江省电力公司 , 北京国电通网络技术有限公司 , 国网信息通信产业集团有限公司
IPC分类号: G06F17/30
摘要: 本发明公开了一种大数据的同步复制的方法,基于Tungsten Repilicator的同步复制架构,包括:步骤1:在MySQL中打开BinLog,开启行级变更日志;步骤2:通过抽取变更信息,过滤原始数据,并存入THL中,并采集主键信息;步骤3:读取THL信息,并将其写入到批量的character‑separated格式文件中;步骤4:对当前的数据及发生数据变更的信息进行合并归集,形成数据视图。本发明的大数据的同步复制的方法,解决了大数据平台的数据复制问题,提高实时性和复制性能。
-
公开(公告)号:CN106776680A
公开(公告)日:2017-05-31
申请号:CN201610963368.7
申请日:2016-11-04
申请人: 国网浙江省电力公司 , 北京国电通网络技术有限公司 , 国网信息通信产业集团有限公司
IPC分类号: G06F17/30
CPC分类号: G06F16/275
摘要: 本发明公开了一种分布式流数据的采集方法,包括:步骤1:Source接收Events或通过特殊机制产生Events,并将Events批量的放到一个或多个Channels;步骤2:Channel接收缓存Source输出Events,而当有Sink消费掉Channel中的数据Channel中的数据直到进入到下一个Channel中或者进入终端才会被删除;步骤3:Sink将events传输到下一跳或最终目的,成功完成后将events从channel移除,Sink会消费Channel中的数据,然后送给外部源或者其他Source。本发明的分布式流数据的采集方法,解决了关系库和大数据平台的数据复制问题,提高实时性和复制性能。
-
公开(公告)号:CN106682066A
公开(公告)日:2017-05-17
申请号:CN201610973411.8
申请日:2016-11-04
申请人: 国网浙江省电力公司 , 北京国电通网络技术有限公司 , 国网信息通信产业集团有限公司
IPC分类号: G06F17/30
CPC分类号: G06F16/284 , G06F16/275
摘要: 本发明公开了一种开源关系型数据的同步采集方法,包括:在MySQL中打开BinLog,开启行级变更日志;通过Host1的Tungsten Replicator标准采集器抽取BinLog的变更信息,并通过Tungsten Replicator中的colname过滤器过滤原始数据;从节点Host2d Tungsten Replicator远程读取THL信息,并将其写入到批量的character‑separated格式文件中;通过Tungsten Replicator在大数据平台存入基于行级的CSV文件信息后,可以通过调用大数据平台的CSV组件、MapReduce组件等模块对当前的CSV数据及发生数据变更的信息进行合并归集,形成数据视图,数据视图使用了自定义的特殊格式。可以在不同的数据库版本、异构库进行数据交换,且在数据交换过程中,可以对数据进行过滤和修改。
-
公开(公告)号:CN107451229A
公开(公告)日:2017-12-08
申请号:CN201710605395.1
申请日:2017-07-24
申请人: 北京国电通网络技术有限公司 , 国家电网公司 , 国网北京市电力公司 , 北京中电飞华通信股份有限公司 , 国网信息通信产业集团有限公司
IPC分类号: G06F17/30
摘要: 本发明公开了一种数据库查询方法和装置,包括步骤:根据数据中的实体信息构建实体簇,并将实体簇与存储节点建立映射关系,根据所述映射关系将数据存储至存储节点;根据查询指令,将属于同一实体簇但位于不同存储节点上数据读取到一个存储节点的内存中;根据实体簇中的实体信息将维度数据在存储节点之间进行迁移;执行查询指令。实现了优化的数据库构建和数据库查询方法,提高数据库查询性能。
-
公开(公告)号:CN113986563A
公开(公告)日:2022-01-28
申请号:CN202111626745.5
申请日:2021-12-29
申请人: 北京智芯微电子科技有限公司 , 国网信息通信产业集团有限公司 , 国家电网有限公司 , 北京智芯半导体科技有限公司
摘要: 本发明公开了一种智能电表及其系统内核地址有效性检测方法和检测装置,所述方法包括:创建多个线程应用;对多个线程应用之间的相互调用进行模拟,以对每个线程应用的运行地址是否越界进行有效检测。本发明的检测方法,通过模拟多个线程应用之间的相互调用,对每个线程应用的运行地址是否越界进行有效性检测,有效避免应用程序地址越界造成的系统崩溃,降低了操作系统维护成本,提高了内核操作系统的稳定性、可靠性及健壮性。
-
公开(公告)号:CN113590149A
公开(公告)日:2021-11-02
申请号:CN202110726849.7
申请日:2021-06-29
申请人: 北京智芯微电子科技有限公司 , 国网信息通信产业集团有限公司 , 国家电网有限公司 , 北京智芯半导体科技有限公司
IPC分类号: G06F8/65 , G06F9/4401
摘要: 本发明涉及计算机技术领域,其实施例提供一种程序分段加载运行的方法及装置。该方法包括设置用于引导程序的启动引导程序,以及将所述程序进行分段加载运行,所述方法还包括:设置加载地址,所述加载地址作为将要被加载的程序段的前一程序段的参数,用于标识所述将要被加载的程序段的地址;设置导出函数列表,所述导出函数列表用于存储已被加载的程序段中的供后续程序段所调用的函数;设置查表函数,所述查表函数用于根据所述查表函数的输入参数执行所述导出函数列表中的函数;以及通过所述加载地址、导出函数列表和查表函数实现所述程序的分段加载运行。本发明提升了程序加载的灵活性。
-
公开(公告)号:CN110146903B
公开(公告)日:2020-11-13
申请号:CN201910441448.X
申请日:2019-05-24
申请人: 国网浙江省电力有限公司信息通信分公司 , 国家电网有限公司 , 国网浙江省电力有限公司 , 国网信息通信产业集团有限公司 , 安徽继远软件有限公司
IPC分类号: G01S19/28
摘要: 本发明公开了一种基于反馈调整惯性权重的粒子群北斗卫星选择方法,其步骤包括:首先计算出北斗可视卫星的方位角和高度角,得到选择n颗卫星的状态矩阵,并将GDOP值作为卫星选择的目标函数;然后利用一种反馈调整惯性权重的离散粒子群算法搜索能使目标函数值达到最小的卫星组合,在算法的惯性权重中设计的反馈调整机制可以提高算法的收敛速度,快速求解出全局最优解。本发明将改进型离散粒子群算法应用于北斗卫星选择,有效提高了北斗卫星选择的质量和效率,具有广阔的应用前景。
-
公开(公告)号:CN111669787A
公开(公告)日:2020-09-15
申请号:CN202010507193.5
申请日:2020-06-05
申请人: 国网上海市电力公司 , 北京中电飞华通信有限公司 , 国网信息通信产业集团有限公司 , 北京邮电大学 , 国网陕西省电力公司 , 中国信息通信研究院 , 国家电网有限公司
摘要: 本说明书一个或多个实施例提供一种基于时延敏感网络切片的资源分配方法及装置,在网络切片的资源利用率较低或者较高时,对网络切片的资源进行调整,同时考虑传输时延的约束,得到最佳的物理节点和物理链路。本公开同时考虑传输时延和资源利用率对网络切片的资源的影响,保证在网络切片传输时延较低的情况下,提高网络切片的资源利用率。
-
公开(公告)号:CN109190779A
公开(公告)日:2019-01-11
申请号:CN201811280550.8
申请日:2018-10-30
摘要: 本发明公开了一种基于北斗系统的电网资源监管方法及系统,涉及设备监管领域,该方法包括以下步骤:选定待监管的电网资源设备;实时获取各电网资源设备的工作信息,工作信息由预设的监测系统监测得到,工作信息中包含多项与设备类别相对应的工作参数数据;利用北斗系统实时获取各电网资源设备的地理方位;将各电网资源设备的设备类别、工作信息以及地理方位进行打包,得到与各电网资源设备对应的监管信息数据包,监管信息数据包中的数据依据工作信息以及地理方位实时更新;根据各监管信息数据包构建电网资源总览地图。本发明直观展现电网资源设备的分布情况以及其工作情况,为工作人员对设备情况的监管提供便利。
-
-
-
-
-
-
-
-
-